Правильный robots.txt

Конфигурация достойно работающего robots.txt для WordPress. Протестирован, Яндекс с удовольствием его принял на вооружение и работает в соответствии. За Гуглом наблюдаю. Собственно, если у кого есть идеи по доработке этого файла, пишите в комментариях. User-agent: * Allow: /wp-content/uploads/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /feed Disallow: /wp-comments Disallow: /?s= Host: www.4link.org

Полезная информация:

Полезные плагины WordPress
Как быстро узнать версию ISPConfig 3 (ssh)
Html в конце ссылки статей в WordPress
Удалить category WordPress
ISPConfig 3 установить флаг active в MyDNS
Как добавить редирект (301) в ISPConfig
Как склеить домены (301 редирект)
Как добавить алиас домена ISPConfig
Как настроить DNS шаблоны в ISPConfig 3
Удаление плагинов WordPress
Как убрать ссылку из плагина iSape в WordPress
Простой и красивый способ украсить UnderConstruction
iSape vs VKontakte API и iMoney + VK comments
Не показывать виджет iMoney если он пуст
Простой скрипт обратного отсчета (javascript)
Заменить слова в базе MySQL средствами phpMyAdmin
Случайный вывод кода (видео, текст, картинки)
Задача: выравнять картинки по центру div-ов с помощью CSS
Обновляем WordPress до 3.5
Во время загрузки произошла ошибка... WordPress
Сервис подбора цвета
Добавить валюту (руб.) в woocommerce
Польза простых файлов .bat
Полезные фотосервисы
Joomla/Mambo To WordPress Migrator Fatal error (решение)
Joomla/Mambo To WordPress Migrator (5 советов)
Красивые письма с WP Better Emails
Akismet и его API key
При обновлении произошла ошибка: Не удалось определить директорию содержимого
Woocommerce WaitingList
Breadcrumbs редактировать в Cherry FrameWork
Сделать изображения одинаковыми по высоте средствами CSS
Как распечатать каталог содержимого на диске
WordPress не работают постоянные ссылки (404 Not Found)
Как включить logging (debugging) в ISPConfig 3
Несколько простых команд для Cent OS
Дополнительный домен в панели ISPManager
Отображение и текста и логотипа в шаблоне WordPress
Несколько мыслей про Skype
Как отключить сообщения «системы безопасности» Mac OS X
Принудительное включение отображения ошибок в PHP
Отображение количества просмотров статьи в подходящем месте
Шаблон Mantra изменение текста Read more
Грамотный robots.txt для WordPress 4.х
Как в WordPress импортировать .xml файл больше 2mb
ISPManager установить SSL сертификат
Как выводить первую картинку поста wordpress
Как очистить очередь Exim
Как изменить длину анонса (excerpt) плагин
Как удалить ссылки на картинки в новостях WordPress
MainWP Child не добавляется при успешном подключении [Решено]
Добавление бесплатного SSL сертификата на WordPress
Ошибка платежа Яндекс.Касса и Woocommerce
Footer в functions.php для дочерней (child) темы StoreFront WordPress
Удалить все meta name=generator WordPress, Woocommerce, Saphali
Метки: , . Закладка Постоянная ссылка.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте как обрабатываются ваши данные комментариев.