Местный Сообщений: 36 Зарегистрирован: 11 Ноября 2010, 19:22:27 Сказали спасибо 0 раз Статус: offline
Опубликовано 01 Апреля 2011, 19:15:54
Как сделать так, чтобы Яндекс не индексировал технические страницы? Уже после индексации я добавила файл robots.txt, в нем: Disallow: /faq/
но уже проиндексированные страницы с /faq/ никуда не ушли. А нужные страницы с ежедневно обновляющимся контентом не индексируются, хотя и есть в файле sitemap.xml
Может быть количество страниц для индексации ограничено, поэтому нужные и не попадают?
Да и структура сайта в Яндексе как-то странно выглядит:
Состояние на: 1.04.2011 18:04
Раздел гружено страниц Доля (%)
***.ru/ 6240 100
***.ru/faq/ 4640 74,4
***.ru/faq/forum/ 2551 40,9
***.ru/faq/forum/forum/ 1333 21,4
***.ru/faq/forum/forum/forum/ 619 9,9
...
***.ru/photogallery.php? 1414 22,7
А страниц articles, где основная информация, вообще нет.
Помогите разобраться, что с сайтом не так?
Регистрация 
