Главная › Новости

Файл robots txt для сайта на WordPress — его создание и настройка

Опубликовано: 10.05.2017

Файл Robots txt - настройка, директивы и популярные ошибки

Доброго времени суток, ребята! На связи Максим, с материалом о невероятно важном файле robots txt, который должен присутствовать практически на каждом блоге и сайте, так как без него, продвижение практически невозможно. В этот раз, мы без лишних прелюдий начнём разбирать основные вопросы поста. Даже не стану рассказывать о своих событиях в жизни, к сожалению, ничего интересного со мной сейчас не происходит и, вообще, меня засосала рутина.

Оглавление статьи:

Зачем нужен файл robots txt на сайте вордпресс

Начнём с назначения этого, казалось бы, невзрачного текстового файлика, чья значимость далеко не преувеличена. Итак, файл robots txt для сайта на wordpress – это обычный текстовый файл (создаётся с помощью блокнота), расположенный в корневой директории сайта, в котором прописываются специальные инструкции для роботов поисковых систем. Эти записи способны запрещать или, наоборот, позволять поисковикам индексировать отдельные страницы и разделы сайта (блога).

Представьте, будто ваш сайт – это уютная квартирка, в которой есть несколько комнат. Хотя нет, квартиры будет мало, так что представим дом, где полно самых разных помещений приватного характера (только для хозяев): спальня, кладовки, чердак со складом всякой утвари, комната с сейфом и так далее. И все эти помещения в доме, должны быть доступны только хозяевам, но не гостям.

Я полагаю, вы поняли, о чём я говорю?! Дело в том что, на вашем блоге имеются такие пространства, которые не должны видеть роботы (гости), то есть, мы прячем всё не подходящее для их глаз и открываем только нужные блоки, разделы. Именно это является нашей задачей, вернее файла robots.txt – открыть доступ к одним разделам и закрыть к другим.