Полит.ру
Полит.ру
Полит.ру
Разделы
Информация
Проекты

Рейтинги Госсайты блокирующие поисковые машины через ROBOTS.TXT

Сайты государственных структур у которых в файлах robots.txt содержатся инструкции по блокировке поисковых машин
Всего сайтов: 9
Название
Robots.txt
http://www.szfo.ru/robots.txt
Текст:
<?if(!strstr($_SERVER[SERVER_NAME],"spbnews.ru")) exit();?> User-agent: * Disallow: /
http://www.lipprok.ru/robots.txt
Текст:
User-agent: * Disallow: /
http://29.gibdd.ru/robots.txt
Текст:
User-agent: * Disallow: /
http://67.gibdd.ru/robots.txt
Текст:
User-Agent: * Disallow: /
http://duma.niac.ru/robots.txt
Текст:
User-Agent: * Disallow: /
http://www.typhoon.obninsk.ru/robots.txt
Текст:
User-Agent: * Disallow: /
http://www.fso.gov.ru/robots.txt
Текст:
# robots.txt User-agent: * Disallow: /
http://www.rosreestr.ru/robots.txt
Текст:
User-agent: YandexSomething/1.0 Disallow: User-agent: Yandex.Server/3.4 Disallow: User-agent: Yandex Disallow: User-agent: Googlebot/2.1 Disallow: User-agent: Googlebot Disallow: User-agent: * Disallow: /
http://www.russiatourism.ru/robots.txt
Текст:
User-Agent: * Disallow: /

Редакция

© Полит.ру, 2010. Все права защищены и охраняются законом.
Разработка Idalab.