Сообщения с тегами: robots.txt

Как показать роботу главное зеркало сайта?

На Форуме о поисковых системах с завидной регулярностью появляются десятки тем с названиями "Мой сайт выпал из индекса!", "В индексе осталось 4 страницы" и т.п. Все они посвящены выпадению сайта из индекса (а соответственно и из выдачи) поисковых систем. Т.к. в основном данная ситуация характерна для Яндекса, сразу следует совет: "Пиши Платону!". Платон Щукин – собирательный образ, коллективный псевдоним техподдержки Яндекса, именем которого обычно подписывается саппорт в ответ на гневные письма вебмастеров. Ничуть не преуменьшая "заслуг" Яндекса в подобных ситуациях, все же отметим, что не менее половины подобных проблем вызваны ошибками самих вебмастеров и оптимизаторов. Самый распространенный случай – когда Яндекс определил главным зеркалом сайт www.site.ru (или главное зеркало было прописано таким образом в директиве Host в robots.txt), а далее вебмастер установил 301 редирект с него на site.ru (без www).

Что же происходит в таком случае?..

Читать »

Оценка сайта глазами ПС

Оценив сайт по приведенным признакам можно понять причины отказа поисковых систем индексировать Ваш сайт...

Читать »