|
Через ИИ (ChatGPT и прочие) парсят сайты. Дорого, но это позволяет увидеть контент на страницах с защитами (когда AI боты разрешены в фаерволах, антиддосах, clouflare, антиботе). Потому если у вас есть контент, который лучше скрывать от ИИ ботов - не разрешайте этих ботов в Антиботе (по умолчанию они не могут получить контент). Ну и не забывайте в шаблон сайта добавлять мета тег:
<meta name="robots" content="noarchive" />
он запретит отображение "сохраненной копии" в выдаче поисковых систем.
|