Это просто содержание моего файла robots txt, можно скопировать и установить на свой сайт.

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
Host: имя сайта

Sitemap: http://имя сайта/sitemap.xml.gz
Sitemap: http://имя сайта/sitemap.xml

 

НадеждаWordPress
Это просто содержание моего файла robots txt, можно скопировать и установить на свой сайт. User-agent: * Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /feed/ Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */comments Disallow: /category/*/* Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /?s= User-agent: Yandex Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /feed/ Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */comments Disallow: /category/*/* Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow:...

Возможно Вас также заинтересует:

Как установить плагин социальных сетей
Плагин социальных сетей помогает сообщать что происходит на сайте, какие изменения тут происходят, какие статьи появляются. Причем очень быстро и удобно. Плюс эти кнопки позволяют ...
Как сделать одностраничник на главной странице сайта
По умолчанию, когда Вы поставили тему, все статьи выводятся на главную страницу, одна за другой. Но это не всегда удобно. Можно выбрать любую страницу, ...
Как вставить картинку в сайдбар wordpress
Иногда есть потребность вставить картинку в сайдбар wordpress. Исполняется это аналогично размещению баннеров. В общем-то баннер - это ведь тоже картинка, к которой добавлена ссылка.
Постраничная навигация wordpress с помощью WP-Pagenavi
Трудно представить на настоящий момент сайт или блог без постраничной навигации. В самом деле, это просто необходимая вещь для улучшения ориентации на каком либо ...
4 лучших плагина WordPress для шрифтов
Статья посвящена обзору плагинов WordPress для шрифтов. 
Рекомендуется немедленное обновление, версия WordPress 4.2.3
23 июля 2015 года, WordPress 4.2.3 теперь доступна для общественности. Это обновление безопасности для всех предыдущих версий WordPress.
Арифметическая капча. Где скачать капчу и как установить
Здравствуйте, уважаемый читатель моего блога. Сегодня установила новую, я сказала бы оригинальную капчу, которую Вы можете увидеть и которой можете воспользоваться, если захочется отзыв ...
Как сделать кнопку скачать с помощью картинки
Здравствуйте, уважаемый читатель моего блога. Продолжаю тему о кнопках. В этой статье пойдет речь о том как сделать кнопку скачать.