В очередной раз убедился в том, насколько важно сразу же после регистрации сайта прописать директиву host в файле robots.txt. Я наивно полагал, что Яндекс уже научился отличать основную версию сайта от зеркала, но оказалось, что это далеко не так. Скажите мне, пожалуйста, почему яндекс посчитал основным доменом www.moipost.ru, а moipost.ru зеркалом, если все внешние ссылки, которые покупались после открытая блога были без www? Почему Google все время определяет зеркало правильно, а Яндекс нет?

Почему важно сразу прописывать Host в robots.txt

Все дело в том, что я как-то особо не обращал внимания на то, что Яндекс перепутал зеркало домена. Позиции равномерно росли, посещаемость на блоге тоже, все довольны. Но когда до меня, наконец, дошло, что все естественные ссылки ведут на домен с www, а продвигаю то я блог без www, мною было решено срочно прописать в robots.txt директиву host (чтобы подсказать Яндексу главное зеркало сайта), но я не ожидал, что результаты будут настолько плачевными. ... Читать дальше »