robots.txt

Сайт не имеет файла robots.txt. Раньше он был, но его сняли по технически глупым причинам. Что мы имеем сегодня:

1. Куча технических папок в корне, не представляющих пользы для робота
2. Лишние страницы в индексе типа feed комментов, папки плагинов и что-то еще, до чего пока не добрался

В первую очередь, закрываем от индексации все ненужные папки и файлы. Вторым этапом читаем спецификацию WordPress и закрываем соответственно ненужные технические страницы.

Роботс загружен и проверен на валидность в Я.Вебмастере.

0.3

Теперь тоже самое нужно проделать с форумом и армянской версией сайта.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Можно использовать следующие HTML-теги и атрибуты: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>