Bài báo & nghiên cứu

OpenAI tinh chỉnh GPT-2 774M tham số bằng sở thích của con người

Tiêu đề gốc:Fine-tuning GPT-2 from human preferences

Tóm tắt AI

OpenAI đã tinh chỉnh GPT-2 774M tham số bằng phản hồi của con người, đạt được mức độ phù hợp với sở thích của người chú thích bên ngoài trên nhiều tác vụ. Tác vụ tóm tắt sử dụng 60.000 mẫu chú thích thủ công, các tác vụ đơn giản hơn như viết tiếp theo phong cách chỉ cần 5.000 mẫu; người chú thích ưa thích việc tóm tắt sao chép nguyên câu từ văn bản gốc, khiến mô hình học được cách sao chép. OpenAI cho biết mục đích là đưa công nghệ an toàn tiến gần hơn tới tác vụ tổng quát 'máy trò chuyện với người'.

Thông tin chính

  • OpenAI đã tinh chỉnh GPT-2 774M tham số bằng phản hồi của con người,đạt được mức độ phù hợp với sở…
  • Tác vụ tóm tắt sử dụng 60.
  • 000 mẫu chú thích thủ công,các tác vụ đơn giản hơn như viết tiếp theo phong cách chỉ cần 5.
  • 000 mẫu
  • người chú thích ưa thích việc tóm tắt sao chép nguyên câu từ văn bản gốc,khiến mô hình học được…

Tóm tắt nhanh

Đăng lúc
Cập nhật lúc
Nguồn
OpenAI:官网动态(RSS · 排除企业/客户案例)
Danh mục
Bài báo & nghiên cứu
Điểm AI
65
Đọc bản gốc Đọc toàn văn tại nguồn tin gốc
Lý do đề xuất

原文给出人类偏好微调 GPT-2 的任务结果与标注成本,并暴露标注偏好与作者意图不一致的问题。

Thực thể liên quan

Nguồn và bản quyền

Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.

Liên kết gốc · Mục AIHOT

Cách trích dẫn

Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.

Orange News: OpenAI tinh chỉnh GPT-2 774M tham số bằng sở thích của con người. 19 tháng 9 2019. https://new.nat6.net/vi/news/mbl0jky4zuwkwo6nc6declud6/

Xem tất cả →