IAB Tech Lab анонсировала инициативу LLM Content Ingest API Initiative, нацеленную на создание стандартов по доступу AI-ботов к контенту паблишеров и обеспечению их монетизации. По словам CEO Anthony Katsur, современные LLM массово сканируют сайты, не компенсируя владельцам ресурсов реальные потери трафика и доходов. Текущая практика pay-per-crawl (оплата за одно сканирование) неустойчива: паблишер получает деньги только при первом обращении, тогда как тысячи пользователей LLM могут получать ответы за счет одного запроса. IAB Tech Lab предлагает более справедливую модель pay-per-query (оплата за каждое использование данных), что приближает монетизацию к привычной для паблишеров схеме pay-per-visit.

• Инициатива включает четыре ключевых элемента: контроль доступа (кто может сканировать контент), лицензионные уровни, обязательный аудит/логирование обращений и токенизацию (разделение и уникальное обозначение контента паблишера).
• Токенизация позволит отслеживать, какие фрагменты контента используются LLM и кто ими пользуется. Это важно и для брендов, чтобы видеть, что и кем говорится о них в AI-ответах.
• Cloudflare уже внедрила pay-per-crawl, давая паблишерам право решать: полностью разрешать доступ, блокировать или требовать оплату за каждое сканирование.
• Эксперты считают, что только массовое внедрение новых API и переход к pay-per-query спасет доходы медиа, иначе индустрии грозит «вымирание» по цепочке.

Инициатива IAB Tech Lab пока в стадии обсуждения, но отражает тенденцию: будущее генеративного поиска неотделимо от прозрачных правил и устойчивой монетизации контента паблишеров.