Внутренние документы: как Google использовала ChatGPT для улучшения Bard/Gemini

опубликовал результаты расследования о том, как использовала в 2023 году для ускоренного улучшения собственного чат-бота Bard (позже ). Сотни внутренних документов показывают, что подрядчики Scale AI системно сравнивали и переписывали ответы Bard, ориентируясь на более структурированные и информативные отклики ChatGPT/GPT-4. За лучшие по качеству переписывания сотрудники получали бонусы, а специально составленные таблицы позволяли отслеживать производительность и уровень соответствия ответов.

Хотя Google и Scale AI публично отрицают использование ответов ChatGPT в качестве обучающих данных, в документах описаны десятки сравнений и "гайдлайны" по анализу преимуществ GPT-4. Аналогичная практика side-by-side evaluation действительно распространена на рынке — эксперты отмечают, что такая оценка может всё же косвенно влиять на качество будущих моделей.

В расследовании также раскрыты вопросы информационной безопасности: BI обнаружил открытый доступ к ряду приватных Google Docs, содержащих детали проекта, компенсации и пароли. После обращения издания доступ был ограничен только через несколько дней. Параллельно стало известно, что инвестирует $15 млрд в Scale AI, что усиливает влияние стартапа в секторе AI-разметки и инфраструктуры для Big Tech.

← Назад в лентуЧитать оригинал →
✈️ Подписывайтесь на мой Telegram-канал — там еще больше интересного про AdTech, MarTech, AI и многое другое!