Pandangan dan ulasan

Lubang hitam data di pusat AI

Tajuk asal:The data black hole at the center of AI

Ringkasan AI

Satu definisi kecerdasan ialah kecekapan sampel, tetapi kemajuan AI sejak kebelakangan ini terutamanya bergantung pada pengembangan taburan data dan peningkatan kuasa pengiraan. Pembelajaran pengukuhan pada dasarnya ialah penjanaan data sintetik—melabur banyak kuasa pengiraan untuk menyaring data "baik" melalui pengesah, kemudian melatih model meramalkan output yang betul. Proses ini memerlukan contoh pakar manusia yang besar bagi setiap bidang dan kemahiran, dan industri data telah mencapai hasil tahunan berbilion dolar. Baru-baru ini Epoch melaporkan bahawa model sumber terbuka hanya ketinggalan 4 bulan di belakang model tertutup termaju, kerana data boleh disuling daripada API awam, manakala hiperparameter dan lain-lain sukar disalin. Manusia terdedah kepada kira-kira 200 juta token sepanjang hayat, manakala latihan model termaju berada antara puluhan hingga ratusan trilion token, perbezaan hampir sejuta kali—jurang kecekapan yang besar juga wujud dalam bidang robotik dan pemanduan autonomi.

Maklumat penting

  • Satu definisi kecerdasan ialah kecekapan sampel,tetapi kemajuan AI sejak kebelakangan ini…
  • Pembelajaran pengukuhan pada dasarnya ialah penjanaan data sintetik—melabur banyak kuasa pengiraan…
  • Proses ini memerlukan contoh pakar manusia yang besar bagi setiap bidang dan kemahiran,dan…
  • Baru-baru ini Epoch melaporkan bahawa model sumber terbuka hanya ketinggalan 4 bulan di belakang…
  • Manusia terdedah kepada kira-kira 200 juta token sepanjang hayat,manakala latihan model termaju…

Sekilas pandang

Diterbitkan pada
Dikemas kini pada
Sumber
Dwarkesh Patel:Podcast & Blog(RSS)
Kategori
Pandangan dan ulasan
Skor AI
60
Baca asal Baca artikel penuh di sumber asal
Sebab disyorkan

Dwarkesh 把 AI 的‘笨’归因于数据效率远低于人类,计算虽简但直指要害,他给出的一个逆向洞察是开源模型四个月追上闭源,正是数据驱动进步的最好证据。

Sumber dan hak cipta

Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.

Pautan asal · Entri AIHOT

Cara memetik

Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.

Orange News: Lubang hitam data di pusat AI. 20 Jun 2026. https://new.nat6.net/ms/news/cmql6vhtu01n0slluxpq3yvzh/

Lihat Semua →