Тема: как Yahoo Slurp и MSNBot находит ?
Показать сообщение отдельно
Старый 13.02.2009, 18:48   #1
 
Регистрация: 03.10.2008
Сообщений: 17
Доменные сделки: 0
Реноме:
Одобрения
Спасибо (Отдано):
Спасибо (Получено):
как Yahoo Slurp и MSNBot находит ?
поставил на новый домен сайтик
в robots.txt
запретил индексацию сайта
по статистике заметил что ходит MSNBot и Yahoo Slurp
откуда они пронюхали про новый домен?
IQSoft вне форума   Ответить с цитированием