amp-web-push-widget button.amp-subscribe { display: inline-flex; align-items: center; border-radius: 5px; border: 0; box-sizing: border-box; margin: 0; padding: 10px 15px; cursor: pointer; outline: none; font-size: 15px; font-weight: 500; background: #4A90E2; margin-top: 7px; color: white; box-shadow: 0 1px 1px 0 rgba(0, 0, 0, 0.5); -webkit-tap-highlight-color: rgba(0, 0, 0, 0); } .amp-logo amp-img{width:190px} .amp-menu input{display:none;}.amp-menu li.menu-item-has-children ul{display:none;}.amp-menu li{position:relative;display:block;}.amp-menu > li a{display:block;} /* Inline styles */ h2.acss2f015{text-align:center;} .icon-widgets:before {content: "\e1bd";}.icon-search:before {content: "\e8b6";}.icon-shopping-cart:after {content: "\e8cc";}

Categories: WordPress

robots.txt для Word Press

Файл robots.txt имеет большое значение на индексацию сайта в поисковых системах. Его правильная настройка важна. Многие web-мастера теряют недели времени из-за того, что ввели не правильные значения в robots.txt, и пришлось потом всё переделывать.

Итак, рассмотрим, каким должен быть robots.txt для сайта на Word Press, так, чтобы он оказался успешно проиндексированным.

Как сделать robots.txt

robots.txt позволяет настраивать процесс индексации сайта, запрещать добавление в поисковик некоторых страниц и файлов. В robots.txt могут использоваться следующие команды:

User-agent – используется для того, чтобы показать, для какого поисковика какие-либо правила. Так, например User-agent:
Yandex означает, что всё, что ниже нужно для Yandex. А User-agent: * устанавливает правила для всех поисковиков.
Disallow – это команда, которая показывает, какие ссылки не следует индексировать. Это могут быть страницы с дублированным материалом, карты сайта html, формы регистрации и другие. От индексации также следует закрыть некоторые папки CMS. Например, Disallow: /wp-content/themes
Host – указывается главное зеркало сайта с www или без него.
Sitemap – указывает адрес к карте сайта.

Заполнение всех этих параметров важно. Создание robots.txt следует провести внимательно, иначе потратите много времени зря.

В robots.txt могут использоваться и другие команды. Приведённые выше являются основными.

Пример robots.txt для Word Press

В образце следует заменить «сайт.ру» на ваш сайт.

Обратите внимание, если у вас не установлен плагин, который создаёт человекопомнятный url, то могут возникнуть проблемы индексации, если вы используете вышеприведённый robots.txt. Чтобы их избежать, нужно либо установить такой плагин, либо убрать из robots.txt строку Disallow: /*?*

Как проверить robots.txt

В Yandex есть специальный сервис, в котором вы можете проверить правильность заполнения robots.txt. В нём нужно нажать на кнопку «Загрузить robots.txt с сайта». Затем вы увидите содержание этого файла, и сообщения об ошибках, если они есть.

В Yandex можно также проверить, не закрывает ли robots.txt доступ к какой-либо нужной странице сайта. Для этого нужно ввести url проверяемой страницы и нажать на кнопку «Проверить». Таким образом, можно добиться правильного robots.txt и хорошей и быстрой индексации сайта.

Адель Гадельшин

Next Как изменить шрифт на Word Press »

Previous « Формы на Word Press

View Comments

Раушан says:

11 ноября 2017 at 6:59

Вроде всё просто и понятно,но цена ошибки велика.Наверное стоит проверить свой robots.txt на Яндексе,Хотелось бы услышать какие ещё есть мнения по этому вопросу.
Лидия says:

17 января 2016 at 19:37

На курсе просто "веря наслово" по заданиям вставляли файл robots.txt и устанавливали плагин. А сейчас, прочитав, статью, все встает на свои места, что и для чего делается.
Раис says:

7 февраля 2015 at 19:30

Прохожу тренинг по созданию сайта.Намучился с robots.txt. И так и эдак. Загружается не там где должен. Попрошу помощи .А в общем все понятно (разжевано).
Владимир says:

6 февраля 2015 at 5:29

Полагаю, что по урокеуя всё сделал правильно! Плагин установлен и как понимаю работает.