Оптимизировать robots.txt под wordpress


роботы wordpress

Файл robots.txt — это файл, что позволяет сканерам, т.е. ботов (ro), рыскать в Интернете для индексирования вашего сайта в поисковых системах.

Этот файл предоставляет ботов необходимые показания таким образом, чтобы они должным образом через ваш веб-сайт, но это необходимо также указать, что роботы не следует индексировать!

WordPress, файл robots.txt является виртуальным по умолчанию, так что вы не можете его изменить. Для него добавить инструкции, это просто, просто создайте этот файл, он будет автоматически заменять виртуального файла!

Чтобы создать его, ничего проще:

  • Вы открываете свой блокнот
  • Вы вставить следующее:
Агент пользователя: *.
Запретить: cgi - bin
Запрещать: / wp-admin
Запрещать: / wp-включает в себя
Запрещать: / wp содержание/плагины
Запрещать: / wp-content/cache
Запрещать: / wp-content/themes
Запрещать: / WP - login.php
Запрещать: / * wp - login.php *.
Запретить: Архив
Запрещать: / корма
Запрещать: / комментарии
Запрещать: / автор
Запретить: /contact/
Запретить: * Архив
Запретить: * / корма
Запретить: * / комментарии
Запрещать: / z/j /.
Запрещать: / z/c /.
Запретить: /stats/
Запретить: /dh_
Запретить: /login/
Запретить: /wget/
Запретить: /httpd/
Запретить: гласных
Запретить: участие
Запретить: оптимальный
Запрещать: / c /
Запретить: /j/
Запрещать: / * .php$
Запрещать: / *? *.
Запретить: *.js$
Запретить: форматы $
Запретить: *.css$
Запретить: могут $
Запретить: *.wmv$
Запретить: *.cgi$
Запретить: *.xhtml$
Запрещать: / *?
Разрешить: / wp-content/uploads
# alexa Архив
Агент пользователя: ia_archiver
Запрещать: /.
# разрешить роботы google изображение поиска изображений
User-agent: Googlebot изображения
Запрещать: / wp-включает /.
Разрешить: / *.
  • Сохраните файл под именем роботов с расширением txt
  • и отправить его в корневой каталог вашего сайта
  • чтобы проверить, что он хорошо реализованы, и он даст хорошие инструкции, позволяя роботов, хорошо для поиска вашего сайта без до сих пор являются страниц индекса бесполезно, мало соответствующих, которые могли бы сбить ваш SEO, вы просто добавить адрес вашего сайта robots.txt

Примечание: Если вы используете Google XML Sitemap Generator, сделать уверен, добавить URL-адрес сайта для виртуального файла robots.txt, а = снят.

Оставьте комментарий

Your email address will not be published. Required fields are marked *