Комментов: 0
Просмотров: 694



Комментов: 0
Просмотров: 602



Комментов: 0
Просмотров: 1119


Опубликовано 3 года и 2 месяца назад в разделе Статьи   

Комментов: 0
Просмотров: 1532



Составляем правильный Robots.txt для Dle сайта

Здравствуйте, уважаемые начинающие вебмастера. Речь в сегодняшней статье пойдет от том, как составить правильный Robots.txt на своем Dle сайте, так что бы поисковые машины индексировали именно те страницы сайта, которые Вы хотели видеть в индексе поисковых системах. Robots.txt позволяет правильно направлять поисковые машины по заданному курс, что улучшить индексацию сайта и запретит к индексации те страницы Dle сайта, которые не должны оказываться в публичном доступе. Поисковые машины индексируют все, что предоставляет ему веб - мастер и выдает их в индекс. Только веб - мастер вправе, что то запретить индексировать поисковым системам. Как раз о том, что запретить, а что разрешить индексировать поисковым системам и пойдёт речь в данной статье.

Комментов: 0
Просмотров: 5006