Архивы и robots.txt

Предыдущая тема Следующая тема Перейти вниз

Архивы и robots.txt

Сообщение  Гость в Вт Янв 15, 2013 11:50 am

Сергей, здесь все-таки нужен какой-то раздел вопросов и ответов... Приходится лепить все в нетематический раздел...
После публикации своего блога из архива и попытке проиндексировать его, Яндекс написал мне "Документ запрещен в файле Robots txt". Я открыл архив к индексации. Это правильно, или не стоило?
Вот мой роботс на данный момент:
Код:
User-agent: *
Disallow: /search/
Disallow: /search/label/
Allow: /*archive.html
Allow: /

Sitemap: (здесь идет адрес)/feeds/posts/default?orderby=updated

User-agent: Yandex
Disallow: /search/
Disallow: /search/label/
Allow: /*archive.html
Allow: /

Гость
Гость


Вернуться к началу Перейти вниз

Предыдущая тема Следующая тема Вернуться к началу


 
Права доступа к этому форуму:
Вы не можете отвечать на сообщения