Правильный robots.txt

Конфигурация достойно работающего robots.txt для WordPress. Протестирован, Яндекс с удовольствием его принял на вооружение и работает в соответствии. За Гуглом наблюдаю. Собственно, если у кого есть идеи по доработке этого файла, пишите в комментариях. User-agent: * Allow: /wp-content/uploads/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /feed Disallow: /wp-comments Disallow: /?s= Host: www.4link.org

Полезная информация:

Полезные плагины WordPress
Доступ к namebased сайту без DNS-записи в Windows
Как добавить отображения даты в подвале сайта WordPress.
Как быстро узнать версию ISPConfig 3 (ssh)
Html в конце ссылок страниц WordPress
WordPress Super Cache - кто такой?
ISPConfig 3 установить флаг active в MyDNS
Как склеить домены (301 редирект)
Как добавить алиас домена ISPConfig
Как настроить DNS шаблоны в ISPConfig 3
Форма контактов для WordPress
TimThumb error has occured WordPress
Простой и красивый способ украсить UnderConstruction
iSape vs VKontakte API и iMoney + VK comments
Простой скрипт обратного отсчета (javascript)
Русификация плагина «NextGEN Gallery» (файл)
WP-PageNavi добавление пагинации
Добавление меню в старый шаблон WordPress
Задача: выравнять картинки по центру div-ов с помощью CSS
Как убрать точки li в меню
Обвести текст при помощи HTML и CSS
Добавить html в категорию и страницу
Обновляем WordPress до 3.5
Во время загрузки произошла ошибка... WordPress
Добавить валюту (руб.) в woocommerce
Польза простых файлов .bat
Joomla/Mambo To WordPress Migrator Fatal error (решение)
Красивые WordPress caption
Вывод материалов из рубрики списком WordPress
Jazzy Forms плагин, который радует!
Javascript прокрутки страницы
Akismet и его API key
При обновлении произошла ошибка: Не удалось определить директорию содержимого
Ubuntu простой backup на Яндекс диск
WordPress http error - решение проблемы
Удаляем строки Saphali Lite, Woocommerce, All in one seo pack
Woocommerce WaitingList
WordPress не работают постоянные ссылки (404 Not Found)
Как включить logging (debugging) в ISPConfig 3
Отображение и текста и логотипа в шаблоне WordPress
Как в Mac Os X заменить QIP
Несколько мыслей про Skype
Как отключить сообщения «системы безопасности» Mac OS X
Принудительное включение отображения ошибок в PHP
Шаблон Mantra изменения вида пагинации
Грамотный robots.txt для WordPress 4.х
Как очистить очередь Exim
Как обойти AdBlock
Плагин карты сайта XML
Как изменить длину анонса (excerpt) плагин
Управления ссылками WordPress плагин WPNoExternalLinks
Добавление бесплатного SSL сертификата на WordPress
Удалить все meta name=generator WordPress, Woocommerce, Saphali
Удаляем второй meta name=description от All in One Seo Pack
Повышение безопасности редактируя .htaccess
Метки: , . Закладка Постоянная ссылка.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте как обрабатываются ваши данные комментариев.