Грамотный robots.txt для WordPress 4.х

Грамотный robots.txt для WordPress 4.х

Грамотный robots.txt для WordPress 4.х

Сегодня сразу после обновления движка WordPress Яндекс прислал мне страшилку с запретом индексирования сайта. Обновление WordPress прошло при этом успешно, только файла robots.txt я на хостинге не обнаружил, так что будьте бдительны. Пришлось заливать на хостинг новый файл robots.txt и раз уж пришлось делать это, я решил показать, что именно у меня в robots.txt для WordPress если пригодится я буду рад. Читать и применять!

Правильный robots.txt

Конфигурация достойно работающего robots.txt для WordPress. Протестирован, Яндекс с удовольствием его принял на вооружение и работает в соответствии. За Гуглом наблюдаю. Собственно, если у кого есть идеи по доработке этого файла, пишите в комментариях. Читать и применять!