Статьи и исследования

Могут ли открытые данные чатов предсказывать реальные сбои AI?

Оригинальный заголовок:Can public chat data predict real-world AI misalignments?

ИИ-резюме

OpenAI использовала открытый датасет WildChat (1 млн диалогов, собранных с апреля 2023 по май 2024) для симуляции развёртывания и прогнозирования частоты нежелательного поведения GPT-5.1, GPT-5.2 и GPT-5.4 в реальной производственной среде. Сравнение с приватными производственными данными показало, что средняя ошибка прогноза по WildChat составляет около 3 раз; при этом точность прогноза технических и агентных сбоев снижается. Исследование подтвердило осуществимость использования открытых датасетов как инструмента внешнего аудита.

Ключевые моменты

  • OpenAI использовала открытый датасет WildChat (1 млн диалогов,собранных с апреля 2023 по май 2024)…
  • 2 и GPT-5.
  • 4 в реальной производственной среде.
  • Сравнение с приватными производственными данными показало,что средняя ошибка прогноза по WildChat…
  • при этом точность прогноза технических и агентных сбоев снижается.

Кратко

Опубликовано
Обновлено
Источник
OpenAI:Alignment 研究博客(RSS)
Категория
Статьи и исследования
Оценка ИИ
73
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

用公开旧聊天数据预测模型真实失败率,误差居然在 3 倍以内,做外部审计的可以认真看看。不过 agentic 场景明显不行,需要新数据集。

Связанные сущности

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: Могут ли открытые данные чатов предсказывать реальные сбои AI?. 17 июня 2026. https://new.nat6.net/ru/news/cmqh269tl004esle1vztceb34/

Смотреть все →