Блог / Robots.txt

Текстовый файл, ограничивающий поисковым роботам доступ к содержимому на http-сервере

Наверное, только ленивый не писал про то, как должен выглядеть правильный Robots.txt для Вордпресс. Я попробую объяснить, почему многие старые ...

В последнее время часто возникает задача запретить индексацию всех страниц сайта кроме главной. Задача простейшая, но с нюансами в решении.

Запустив сайт на WordPress, крайне желательно скрыть все технические и дублирующие страницы от индексации ...