Pandangan dan ulasan

Answer.AI uji Devin: hanya 3 daripada 20 tugas berjaya, keupayaan pengekodan autonomi dipersoal

Tajuk asal:Thoughts On A Month With Devin

Ringkasan AI

Pasukan Answer.AI menjalankan ujian mendalam selama sebulan terhadap jurutera perisian AI Devin. Walaupun prestasinya sederhana dalam tugas mudah seperti integrasi API pada peringkat awal, keputusan mengecewakan apabila diperluas kepada 20 tugas sebenar termasuk penciptaan projek baharu, penyelidikan dan pengubahsuaian kod: hanya 3 berjaya, 14 gagal, dan corak kejayaan atau kegagalan tidak dapat diramalkan. Devin sering terperangkap dalam jalan buntu teknikal, menghasilkan "kod mee" yang terlalu kompleks, atau berhalusinasi dan membuang banyak masa apabila berdepan tugas yang tidak dapat dilaksanakan. Artikel menyatakan prestasi sebenar jauh lebih rendah daripada jangkaan promosi dan sukar menggantikan pembangun manusia.

Maklumat penting

  • Pasukan Answer.
  • AI menjalankan ujian mendalam selama sebulan terhadap jurutera perisian AI Devin.
  • Walaupun prestasinya sederhana dalam tugas mudah seperti integrasi API pada peringkat…
  • Devin sering terperangkap dalam jalan buntu teknikal,menghasilkan "kod mee" yang terlalu…
  • Artikel menyatakan prestasi sebenar jauh lebih rendah daripada jangkaan promosi dan sukar…

Sekilas pandang

Diterbitkan pada
Dikemas kini pada
Sumber
Answer.AI 官方研发博客(RSS)
Kategori
Pandangan dan ulasan
Skor AI
78
Baca asal Baca artikel penuh di sumber asal
Sebab disyorkan

来自知名 AI 评测机构的详实一手数据,揭示了明星产品 Devin 在真实工作流中的局限性,为评估当前自主编程 Agent 的实际成熟度提供了重要参考。

Sumber dan hak cipta

Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.

Pautan asal · Entri AIHOT

Cara memetik

Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.

Orange News: Answer.AI uji Devin: hanya 3 daripada 20 tugas berjaya, keupayaan pengekodan autonomi dipersoal. 8 Januari 2025. https://new.nat6.net/ms/news/yu0x1iq7drpkrq8fsc6ydk4cb/

Lihat Semua →