Правильный robots. Как написать_,ч.1

Ответить
Аватара пользователя
Red Hot Kevorkian
Сообщения: 1
Зарегистрирован: Пт окт 28, 2016 9:25 am

Правильный robots. Как написать_,ч.1

Сообщение Red Hot Kevorkian » Пт окт 28, 2016 10:23 am

Приветствую Вас, мои дорогие читатели !
Данный пост будет посвящен теме - как создать правильный robots для WordPress!
Вполне возможно, что вы досконально знаете, как все это сделать, тогда эта статья вас не заинтересует. Она для тех, кто слышал, но не знает, как и тех, кто вообще об этом не слышал.
Давайте разберем, что это за зверь та такой - robots. txt.
robots. txt
Файл robots. txt находиться в корне вашего сайта, там же где и правильный htaccess. На нашем сайте все должно быть правильным. )))
Файл призван указать поисковому роботу, что индексировать, а что обойти своим вниманием. Если этого не сделать, то паук обязательно проиндексирует много не нужных страниц, и может произойти дублирование вашей информации.
Вроде ничего сложного, однако, важность этого файла просто трудно переоценить. Он не выносит сор из избы и позволяет в глазах поисковиков выглядеть белыми и пушистыми.
Если у вас нет этого файла, блог все равно будет работать. Но мы же хотим большой и раскрученный блог!
Создаем robots. txt для WordPress.
Для создания правильного файла, нам потребуется любой текстовый редактор.
Открываем его и приступаем к созданию файла.
Каждый робот имеет свое имя. В нашем файле мы будем называть робота по имени, и рассказывать ему, что и как он должен сделать. Собственно схему поведения мы задаем всем ботам, а боту Яндекса отдельно. Зовут его Yandex.
Ваш правильный robots. txt должен содержать
User-agent: *
Disallow:
В таком контексте мы разрешаем индексацию блога полностью.

Ответить

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 1 гость