Новая угроза цифровой экосистеме — так называемые "серые боты" (gray bots), активно влияющие на аналитику, инфраструктуру и доходы медиа и e-commerce сайтов. Эти боты, порожденные всплеском генеративного ИИ, сочетают функции традиционных скрейперов, AI-агентов и краулеров, но действуют вне привычных границ "хорошего" и "плохого" трафика. Barracuda зафиксировала миллионы запросов от ClaudeBot (Anthropic) и ByteSpider (TikTok), включая кейсы с 10 млн обращений за месяц. HUMAN Security сообщила о более 215 млрд попытках скрейпинга за 2024 год, причём техно-сектор продемонстрировал 500% рост.

Серые боты собирают данные для языковых моделей (ChatGPT, Perplexity), но одновременно:

• увеличивают объем невалидного трафика (GIVT);
• подрывают работу аналитики и рекламных метрик;
• обходят paywall, скрейпят IP и нагружают серверы;
• сложно детектируются: маскируются под браузеры, игнорируют robots.txt, обходят CAPTCHA.

Некоторые издатели (например, Ziff Davis) уже подали иски против OpenAI. Wikimedia заявила о росте инфраструктурных расходов на 50% из-за активности AI-ботов. Стартапы Skyfire и Cequence предлагают фреймворк Know Your Agent: идентификация, монетизация и безопасный доступ. ЕС, в свою очередь, усиливает регулирование через AI Act и GDPR. Вопрос компенсации за оригинальный контент и прозрачного доступа к сайтам становится ключевым для индустрии.