Госсайты прячутся от поисковиков

Pronets[Ru]

-Добрый боТ-
Около 1200 сайтов американской зоны .gov запрещают поисковым роботам индексировать свои страницы. А российские госсайты почти не используют robots.txt - у них есть более надежные методы сокрытия информации.


<a href="http://webplanet.ru/news/research/2009/11/23/robots_gov.html" target="_blank">Далее</a>
 
Назад
Сверху