Мнения

Answer.AI протестировала Devin: 3 успеха из 20 задач, автономное программирование под вопросом

Оригинальный заголовок:Thoughts On A Month With Devin

ИИ-резюме

Команда Answer.AI месяц глубоко тестировала ИИ-инженера Devin. Несмотря на приемлемые результаты в простых задачах вроде интеграции API, при расширении до 20 реальных задач — создания новых проектов, исследований и правок кода — результат разочаровал: только 3 успеха, 14 провалов, без предсказуемой закономерности. Devin часто заходит в технические тупики, генерирует чрезмерно сложный «спагетти-код» или галлюцинирует при невыполнимых задачах, тратя много времени. Статья отмечает, что реальные показатели намного ниже заявленных и заменить человека-разработчика он не способен.

Ключевые моменты

  • Команда Answer.
  • AI месяц глубоко тестировала ИИ-инженера Devin.
  • Несмотря на приемлемые результаты в простых задачах вроде интеграции API,при расширении до 20…
  • Devin часто заходит в технические тупики,генерирует чрезмерно сложный «спагетти-код» или…
  • Статья отмечает,что реальные показатели намного ниже заявленных и заменить человека-разработчика…

Кратко

Опубликовано
Обновлено
Источник
Answer.AI 官方研发博客(RSS)
Категория
Мнения
Оценка ИИ
78
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

来自知名 AI 评测机构的详实一手数据,揭示了明星产品 Devin 在真实工作流中的局限性,为评估当前自主编程 Agent 的实际成熟度提供了重要参考。

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: Answer.AI протестировала Devin: 3 успеха из 20 задач, автономное программирование под вопросом. 8 января 2025. https://new.nat6.net/ru/news/yu0x1iq7drpkrq8fsc6ydk4cb/

Смотреть все →