Answer.AI testet Devin: nur 3 von 20 Aufgaben erfolgreich, autonome Programmierfähigkeiten fraglich
Originaltitel:Thoughts On A Month With Devin
KI-Zusammenfassung
Das Answer.AI-Team hat den KI-Softwareentwickler Devin einen Monat lang eingehend getestet. Zwar zeigte Devin bei einfachen Aufgaben wie API-Integrationen zunächst akzeptable Leistungen, doch bei 20 realen Aufgaben – darunter neue Projektanlagen, Recherchen und Codeänderungen – fiel das Ergebnis enttäuschend aus: nur 3 Erfolge, 14 Fehlschläge, ohne erkennbares Muster für Erfolg oder Misserfolg. Devin geriet oft in technische Sackgassen, erzeugte überkomplexen „Spaghetti-Code“ oder halluzinierte bei undurchführbaren Aufgaben und verlor viel Zeit. Der Artikel kommt zu dem Schluss, dass die tatsächliche Leistung deutlich unter den Werbeversprechen liegt und menschliche Entwickler kaum ersetzen kann.
Kernpunkte
- Das Answer.
- AI-Team hat den KI-Softwareentwickler Devin einen Monat lang eingehend getestet.
- Zwar zeigte Devin bei einfachen Aufgaben wie API-Integrationen zunächst akzeptable Leistungen,doch…
- Devin geriet oft in technische Sackgassen,erzeugte überkomplexen „Spaghetti-Code“ oder…
- Der Artikel kommt zu dem Schluss,dass die tatsächliche Leistung deutlich unter den…
Auf einen Blick
- Veröffentlicht
- Aktualisiert
- Quelle
- Answer.AI 官方研发博客(RSS)
- Kategorie
- Meinung
- KI-Bewertung
- 78
来自知名 AI 评测机构的详实一手数据,揭示了明星产品 Devin 在真实工作流中的局限性,为评估当前自主编程 Agent 的实际成熟度提供了重要参考。
Quelle & Urheberrecht
Dieser Artikel basiert auf kuratierten Titeln und KI-Zusammenfassungen der öffentlichen AIHOT-API, mit Quellenangabe und Rückverlinkung. Das Urheberrecht am Original liegt bei den ursprünglichen Medien und Autoren; diese Seite spiegelt keine Volltexte.
Zitierhinweis
Beim Zitieren dieses Artikels bitte Titel, Datum und Permalink beibehalten und Orange News als Quelle angeben.
Orange News: Answer.AI testet Devin: nur 3 von 20 Aufgaben erfolgreich, autonome Programmierfähigkeiten fraglich. 8. Januar 2025. https://new.nat6.net/de/news/yu0x1iq7drpkrq8fsc6ydk4cb/