Makalah & Riset

OpenAI menyempurnakan GPT-2 774M parameter dengan preferensi manusia

Judul asli:Fine-tuning GPT-2 from human preferences

Ringkasan AI

OpenAI menyempurnakan GPT-2 774M parameter dengan umpan balik manusia, mencocokkan preferensi anotator eksternal pada berbagai tugas. Tugas ringkasan menggunakan 60 ribu anotasi manusia, tugas yang lebih sederhana seperti kelanjutan gaya hanya memerlukan 5 ribu; anotator lebih menyukai ringkasan yang menyalin kalimat asli secara utuh, sehingga model belajar menyalin. OpenAI menyatakan langkah ini bertujuan mendekatkan teknologi keamanan pada tugas umum 'percakapan mesin dengan manusia'.

Poin utama

  • OpenAI menyempurnakan GPT-2 774M parameter dengan umpan balik manusia,mencocokkan preferensi…
  • Tugas ringkasan menggunakan 60 ribu anotasi manusia,tugas yang lebih sederhana seperti kelanjutan…
  • anotator lebih menyukai ringkasan yang menyalin kalimat asli secara utuh,sehingga model belajar…
  • OpenAI menyatakan langkah ini bertujuan mendekatkan teknologi keamanan pada tugas umum 'percakapan…

Ringkasan cepat

Waktu terbit
Waktu diperbarui
Sumber
OpenAI:官网动态(RSS · 排除企业/客户案例)
Kategori
Makalah & Riset
Skor AI
65
Baca aslinya Baca artikel lengkap di sumber aslinya
Alasan rekomendasi

原文给出人类偏好微调 GPT-2 的任务结果与标注成本,并暴露标注偏好与作者意图不一致的问题。

Entitas Terkait

Sumber dan hak cipta

Artikel ini disusun berdasarkan judul pilihan dan ringkasan AI dari API publik AIHOT, dengan sumber yang dicantumkan dan tautan balik; hak cipta konten asli milik media dan penulis aslinya, situs ini tidak menyalin artikel secara penuh.

Tautan asli · Entri AIHOT

Cara mengutip

Saat mengutip artikel ini, sertakan judul, tanggal, dan tautan permanen, serta cantumkan sumber Orange News.

Orange News: OpenAI menyempurnakan GPT-2 774M parameter dengan preferensi manusia. 19 September 2019. https://new.nat6.net/id/news/mbl0jky4zuwkwo6nc6declud6/

Lihat semua →