Правильный robots.txt

Конфигурация достойно работающего robots.txt для WordPress. Протестирован, Яндекс с удовольствием его принял на вооружение и работает в соответствии. За Гуглом наблюдаю. Собственно, если у кого есть идеи по доработке этого файла, пишите в комментариях. User-agent: * Allow: /wp-content/uploads/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /feed Disallow: /wp-comments Disallow: /?s= Host: www.4link.org

Полезная информация:

Правильные анонимайзеры
Полезные плагины WordPress
Доступ к namebased сайту без DNS-записи в Windows
Как добавить отображения даты в подвале сайта WordPress.
Как быстро узнать версию ISPConfig 3 (ssh)
Как включить интернациональные домены (punycode) в ISPConfig3
Html в конце ссылки статей в WordPress
Html в конце ссылок страниц WordPress
Как добавить редирект (301) в ISPConfig
Форма контактов для WordPress
Удаление плагинов WordPress
Как убрать ссылку из плагина iSape в WordPress
Простой и красивый способ украсить UnderConstruction
Разделитель в iSape / Sape
iSape vs VKontakte API и iMoney + VK comments
Не показывать виджет iMoney если он пуст
Простой скрипт обратного отсчета (javascript)
Русификация плагина «NextGEN Gallery» (файл)
WP-PageNavi добавление пагинации
Задача: выравнять картинки по центру div-ов с помощью CSS
Как убрать точки li в меню
Убрать category из ссылки WP (продолжение)
Добавить html в категорию и страницу
Обновляем WordPress до 3.5
Сервис подбора цвета
Полная русификация Woocommerce
Joomla/Mambo To WordPress Migrator Fatal error (решение)
Joomla/Mambo To WordPress Migrator (5 советов)
Красивые WordPress caption
Javascript прокрутки страницы
При обновлении произошла ошибка: Не удалось определить директорию содержимого
Ubuntu простой backup на Яндекс диск
WordPress http error - решение проблемы
Обновление url и адрес картинок после изменения адреса блога
Поиск по размеру файла в Ubuntu
Woocommerce WaitingList
Breadcrumbs редактировать в Cherry FrameWork
Ошибка Deprecated: Function ereg() is deprecated in /samefile.php on line 142
Как включить logging (debugging) в ISPConfig 3
Площадки для размещения статей
Дополнительный домен в панели ISPManager
Несколько мыслей про Skype
Как прочистить дюзы принтеру Epson Stylus Photo на Mac OS X
Принудительное включение отображения ошибок в PHP
Грамотный robots.txt для WordPress 4.х
Как в WordPress импортировать .xml файл больше 2mb
ISPManager установить SSL сертификат
Как обойти AdBlock
Локализация woocommerce Print Invoice & Delivery Note
Управления ссылками WordPress плагин WPNoExternalLinks
MainWP Child не добавляется при успешном подключении [Решено]
Добавление бесплатного SSL сертификата на WordPress
Ошибка платежа Яндекс.Касса и Woocommerce
Удалить все meta name=generator WordPress, Woocommerce, Saphali
Повышение безопасности редактируя .htaccess
Метки: , . Закладка Постоянная ссылка.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте как обрабатываются ваши данные комментариев.