Tutorial & Tips

DharmaOCR memanfaatkan DPO untuk menurunkan tingkat degradasi teks sebesar 59,4%

Judul asli:Direct Preference Optimization Beyond Chatbots

Ringkasan AI

DharmaOCR (model OCR terstruktur) yang dirilis pada April menggunakan Direct Preference Optimization (DPO) sebagai tahap pelatihan kedua setelah supervised fine-tuning (SFT) dalam tugas ekstraksi dokumen berbahasa Portugis Brasil. SFT tidak dapat secara langsung menghukum degradasi teks (perulangan berulang), sedangkan DPO menggunakan keluaran gagal model itu sendiri (perulangan degradasi) sebagai sampel negatif untuk pelatihan preferensi, sehingga menurunkan tingkat degradasi teks rata-rata sebesar 59,4% pada semua keluarga model yang diuji, dengan penurunan tertinggi 87,6% (misalnya Nanonets-OCR2-3B dari 1,61% menjadi 0,20%). DPO tradisional umumnya digunakan untuk penyelarasan obrolan, dan pekerjaan ini memperluasnya ke tugas OCR yang objektif, membuktikan bahwa DPO dapat secara terarah memperbaiki pola kegagalan tertentu.

Poin utama

  • DharmaOCR (model OCR terstruktur) yang dirilis pada April menggunakan Direct Preference…
  • SFT tidak dapat secara langsung menghukum degradasi teks (perulangan berulang),sedangkan DPO…
  • DPO tradisional umumnya digunakan untuk penyelarasan obrolan,dan pekerjaan ini memperluasnya ke…

Ringkasan cepat

Waktu terbit
Waktu diperbarui
Sumber
Hugging Face 社区博客(混合发现)
Kategori
Tutorial & Tips
Skor AI
55
Baca aslinya Baca artikel lengkap di sumber aslinya
Alasan rekomendasi

DPO 不只能对齐,这篇直接用模型自身的垃圾输出当反例,把 OCR 的重复错误平均降了 59%。思路不复杂,但告诉做结构化生成的工程师:训练数据里最该保留的就是模型犯的错。

Sumber dan hak cipta

Artikel ini disusun berdasarkan judul pilihan dan ringkasan AI dari API publik AIHOT, dengan sumber yang dicantumkan dan tautan balik; hak cipta konten asli milik media dan penulis aslinya, situs ini tidak menyalin artikel secara penuh.

Tautan asli · Entri AIHOT

Cara mengutip

Saat mengutip artikel ini, sertakan judul, tanggal, dan tautan permanen, serta cantumkan sumber Orange News.

Orange News: DharmaOCR memanfaatkan DPO untuk menurunkan tingkat degradasi teks sebesar 59,4%. 3 Juni 2026. https://new.nat6.net/id/news/cmpy47xxi01kislax812354vk/

Lihat semua →