AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.
 

НАЗНАЧЕНИЕ:
Защита сайта от «плохих» ботов:
- хитроботов поисковых систем
- спамботов, спамящих в формы
- автоматических парсеров и прокси сайтов ворующих контент
- граберов дорвеев, которые на php парсят контент на автомате
- ботов накручивающих показы и клики рекламы
- второсортных «поисковиков» не дающих трафик
- других ненужных ботов, создающих лишнюю нагрузку на сайт

Скрипт полезен (а часто просто необходим) почти всем как для белых сайтов, так и для дорвеев.
Не нужен скрипт только пользователям Cloudflare, в котором есть похожий функционал, но это не точно =)

После применения данного скрипта - в теста (проводились на дорвеях, с дневной посещаемостью в 20млн+ ботов и индексаторов и 100500 реальных живых людей):
- снижалась нагрузка на процессор на 20% (на тяжелых сайтах типа вордпресс с большим количеством страниц возможно сэкономить больше ресурсов).
- снижался объем расхода интернет трафика сервера на 30%.
- в яндекс метрике значительно снизилось кол-во юзеров с 0 временем на сайте и соответственно кол-во отказов.

Заблокированных «плохих» посетителей относительно реальных юзеров, прошедших проверку (не считая «белых» ботов) 95% (на самом деле если на уровне сервера и в .htaccess не блочились ненужные боты по User-Agent, то заблокированных будет 99.99%). Реальные юзеры при этом не страдают, от поисковых систем писем о проблемах с доступностью сайта пока тоже не поступало.

Для дорвеев и вообще сайтов это хороший способ сокрытия «плохой» рекламы (шок тизеры, кликандеры, мобильный слив на подписки и т.п.) от хитроботов Яндекса.

Более подробное описание: http://antibot.tdsse.com/info.txt
Демо: http://antibot.tdsse.com/
Купить за 9.95$
Обновления бесплатны, скрипт будет развиваться. Обновления всегда можно будет скачать на сайте oplata.info
Служба поддержки оказывается по емейл, с того емейла, с которого вы купили скрипт.
Остерегайтесь подделок и складчин, помните, безопасный скрипт от скрипта с закладкой для шелла может отличаться всего на 10 символов кода.

Вышло обновление, версия 2.01, полностью переписанное, скачать можно на сайте oplata.info (об этом по идее теперь должна приходить рассылка).
Также сайт http://antibot.tdsse.com/ оформлен для людей, а не как сразу было и на нем есть все необходимое (ссылка на лог изменений, на покупку и на скачивание обновлений), и инструкция с описанием красивее оформлена.
Включен лог тех, кто получил 503 для наглядности http://antibot.tdsse.com/antibot/botlog.txt (конфиг со списком белых ботов дефолтный). Это не значит что они совсем не попали на сайт, если они заходили с человеческим браузером, то через 3 сек они попали на сайт.
Уже можно заметить строки с не пришедшим на сайт ярославским гуглом типа:
212.232.60.181 ppp-vpdn-212.232.60.181.yarnet.ru Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Вообще таких фейковых гуглов и яндексов много еще будет.

AntiBot v. 2.03 - добавлена передача хоста реферера в GET переменной (utm-метка).

v. 3.01 от 12 января 2018:

Скрипт можно выносить на сервере в одно общее место (на отдельный домен).
Исправлен косяк связанный с проверкой ботов по $ab_config['whitebot'] != 1.
Конфиг теперь инклудить не надо.
Перечитайте инструкцию http://antibot.tdsse.com/
И рекомендую обновить скрипт, особенно на дорвеях, если есть что прятать от хитроботов.

v. 3.02:
В конфиг добавлена переменная: $ab_config['counter'] (для отображения на заглушке счетчиков).
В конфиге дополнены настройки мейловского бота, добавлен PTR: smailru.net
Добавлена JS защита от открытия сайта в продвинутых анонимайзерах cmle.ru, www.nblz.ru и аналогичных.

Несколько сайтов можно будет с одного скрипта защищать ?

Код открыт, ставить можно на любое количество сайтов. Если сайты на одном сервере в одном юзерском аккаунте и имеют возможность доступа в общую папку, то можно один скрипт ставить для множества сайтов в одном общем месте, чтоб удобнее было обновлять все в одном месте.

В связи с празднованием великого праздника - Дня Святого Патрика, промо код на 50% скидку D421DE44B4384774 на WMSN дорген https://wmsn.biz/dorgen.php , антибот https://antibot.tdsse.com/ и генератор текстов https://textgen.tdsse.com/ . Время действия промо-кодов: c 17.03.2018 по 19.03.2018 А про День Святого Патрика можно почитать тут http://bigpicture.ru/?p=1021791

Еще у одного сайта изменилась жизнь на до и после антибота.

Это было ДО (сайт скорее был мертв, чем жив):
https://preview.ibb.co/dq4BZn/1.jpg

Это стало через 10 минут ПОСЛЕ установки антибота (все летает):
https://preview.ibb.co/gnmVS7/2.jpg

Сайт с 100500 страницами (на самом деле сильно больше), который можно парсить и парсить, что собственно и делали все кому не лень, как просто воры-парсеры контента, так и бесполезные псевдопоисковики, а теперь не делают.
Сколько это экономия в деньгах - сами прикидывайте, Load Average снизилась в 10 раз, потребление оперативки упало в 2 раза.

Шаблон заглушки (страницы проверки) для Антибота в стиле Cloudflare (почти полная копия html кода) скачать без смс и регистрации можно тут (для использования: сохранить его в папке антибота под стандартным именем antibot_tpl.txt).
https://antibot.tdsse.com/cloudflare.png