Сообщение от
pegs
Если сервер шатает от обычных ботов, то это беда с ПО.
Какая беда с ПО?
Я всегда беру VPS, простой хостинг мои сайты не потянет.
А на VPS сам всё устанавливаешь.
Да и боты для меня полезны, я столько ссылок благодаря им получил - никакие платные варианты и рядом не стояли, а их я тоже пробовал.
В итоге пришёл к выводу - ботов не банить, то, что они в итоге делают - Яндексу нравится, так как ссылочная масса увеличивается, причём бесплатно для меня.
Но есть проблема, когда боты слишком шустрые, а у меня 13 миллионов страниц...
Сайт иногда падал на Hetzner, сейчас перешёл на российский хостинг в несколько раз мощнее, проблем пока не было, но я там меньше месяца, ещё рано о чём то говорить. Посмотрим...
добавлено через 13 минут
Сообщение от
idnex
сейчас перешёл на российский хостинг
В смысле - российский VPS.
добавлено через 23 минуты
Вот сейчас у меня в Яндекс Вебмастер 8126 страниц по 50 ссылок, это получается 406300 ссылок благодаря ботам.