Это просто содержание моего файла robots txt, можно скопировать и установить на свой сайт.

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
Host: имя сайта

Sitemap: http://имя сайта/sitemap.xml.gz
Sitemap: http://имя сайта/sitemap.xml

 

НадеждаWordPress
Это просто содержание моего файла robots txt, можно скопировать и установить на свой сайт. User-agent: * Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /feed/ Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */comments Disallow: /category/*/* Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /?s= User-agent: Yandex Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /feed/ Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */comments Disallow: /category/*/* Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow:...

Возможно Вас также заинтересует:

Все для безопасности сайта. Требуется срочное обновление WordPress.
Версия WordPress 4.2.2 доступна с 7 мая 2015 года. На официальном сайте написано: "Это важное обновление безопасности для всех предыдущих версий, и мы настоятельно рекомендуем вам ...
Постраничная навигация wordpress – 33 варианта
В продолжение статьи Постраничная навигация wordpress с помощью WP-Pagenavi предлагаю вам 33 цветные варианта. 
Невидимая капча – лучшее решение защиты от ботов. Как скачать капчу
Вы хотите избавиться от спама приходящего от ботов в комментариях на своем блоге раз и навсегда, но и затруднять обычных пользователей вводом различных кодов ...
Как изменить права доступа на файл или папку внутри сайта
Здравствуйте, уважаемый читатель. В некоторых случаях при настройке или установке того или иного плагина изменить права доступа на файл или папку внутри сайта. А ...
Сервис обратного звонка бесплатно redconnect.ru – отзыв
Cтатья посвящена сервису обратного звонка, у которого есть режим бесплатной работы. Мне кажется такая фишка просто необходима для сайтов интернет-магазинов. А если у вас ...
20 плагинов для формы авторизации и регистрации на сайте WordPress
Если Вам нужна форма авторизации и регистрации на сайте на WordPress, то это можно сделать с помощью плагинов и их достаточно много. Причин для использования для установки ...
Виджет от revolvermaps com
Хочу рассказать о виджете от revolvermaps com. Мне он показался прикольным.
Как работать с виджетами
Виджеты - это вспомогательные элементы, необходимые для управления чего-либо. Давайте посмотрим какие виджеты есть на Вашем сайте wordpressи, как с ними работать.