IAB предлагает API для защиты контента издателей от сбора LLM-моделями

IAB Tech Lab разрабатывает инициативу по созданию технического стандарта LLM Content Ingest API, позволяющего издателям контролировать доступ LLM-моделей к своему контенту и получать за него компенсацию. В рабочую группу уже вошли около десятка издателей, первое заседание состоится 23 июля в Нью-Йорке. Также участвуют edge-платформы Cloudflare и Fastly.

Фреймворк предусматривает заключение договоров между издателями и AI-компаниями, категоризацию контента (базовый, архивный, премиум) и выбор модели оплаты: cost-per-crawl, unlimited access или предпочтительную для IAB — cost-per-query. Контент будет токенизироваться для отслеживания запросов и распределения вознаграждения.

Однако остаются риски: LLM-краулеры обходят robots.txt, а сами AI-компании не проявляют энтузиазма к сотрудничеству. Katsur призывает к объединению издателей и платформ, чтобы заблокировать несанкционированный доступ и усилить позиции в переговорах. Спад трафика у некоторых издателей уже достигает 30–60%, что делает проблему срочной для отрасли.