Правильный robots.txt

Конфигурация достойно работающего robots.txt для WordPress. Протестирован, Яндекс с удовольствием его принял на вооружение и работает в соответствии. За Гуглом наблюдаю. Собственно, если у кого есть идеи по доработке этого файла, пишите в комментариях. User-agent: * Allow: /wp-content/uploads/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /feed Disallow: /wp-comments Disallow: /?s= Host: www.4link.org

Полезная информация:

Правильные анонимайзеры
Как добавить отображения даты в подвале сайта WordPress.
WordPress Super Cache - кто такой?
Удалить category WordPress
ISPConfig 3 установить флаг active в MyDNS
Как добавить редирект (301) в ISPConfig
Удаление плагинов WordPress
Простой и красивый способ украсить UnderConstruction
Разделитель в iSape / Sape
iSape vs VKontakte API и iMoney + VK comments
Простой скрипт обратного отсчета (javascript)
WP-PageNavi добавление пагинации
Случайный вывод кода (видео, текст, картинки)
Добавление меню в старый шаблон WordPress
Задача: выравнять картинки по центру div-ов с помощью CSS
Как убрать точки li в меню
Убрать category из ссылки WP (продолжение)
Добавить новый sidebar
Обновляем WordPress до 3.5
Во время загрузки произошла ошибка... WordPress
Добавить валюту (руб.) в woocommerce
Системные переменные Windows
Полезные фотосервисы
Joomla/Mambo To WordPress Migrator Fatal error (решение)
Вывод материалов из рубрики списком WordPress
Jazzy Forms плагин, который радует!
Javascript прокрутки страницы
При обновлении произошла ошибка: Не удалось определить директорию содержимого
WordPress http error - решение проблемы
Cherry FrameWork logo + description
Удаляем строки Saphali Lite, Woocommerce, All in one seo pack
Woocommerce WaitingList
Breadcrumbs редактировать в Cherry FrameWork
Добавление PageNavi (постраничной навигации) в нестандартные шаблоны
Простой плагин email рассылки (Newsletter) для WordPress
Сделать изображения одинаковыми по высоте средствами CSS
Как распечатать каталог содержимого на диске
Ошибка Deprecated: Function ereg() is deprecated in /samefile.php on line 142
WordPress не работают постоянные ссылки (404 Not Found)
Площадки для размещения статей
Как в Mac Os X заменить QIP
Как сделать в windows 7 в папке «столбцы по размеру содержимого» по умолчанию?
Принудительное включение отображения ошибок в PHP
Отображение количества просмотров статьи в подходящем месте
Шаблон Mantra изменения вида пагинации
Как выводить первую картинку поста wordpress
Как очистить очередь Exim
Как обойти AdBlock
Backup сайта в DropBox
Плагин карты сайта XML
Как изменить длину анонса (excerpt) плагин
Управления ссылками WordPress плагин WPNoExternalLinks
Добавление бесплатного SSL сертификата на WordPress
Footer в functions.php для дочерней (child) темы StoreFront WordPress
Удалить все meta name=generator WordPress, Woocommerce, Saphali
Метки: , . Закладка Постоянная ссылка.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте как обрабатываются ваши данные комментариев.