pingvinbar

Закрыть сайт от индексации в robots.txt

2 posts in this topic

Подскажите пожалуйста, какой командой можно закрыть сайт от индексации в robots.txt?

0

Share this post


Link to post
Share on other sites

Поскольку почти все языки программирования произошли от английского :), есть замечательная команда Disallow. Дословно - "лишить разрешения что-то делать". Вот и всё, собственно. Пишете User agent: и следующей строкой Disallow: / 

 

Если пропишете после User agent: конкретное название, то закроется от конкретного поисковика. Если поставите *, то закроется от всех.

1

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!


Register a new account

Sign in

Already have an account? Sign in here.


Sign In Now