Ra mắt mô hình

OpenAI phát hành mô hình hiểu ngôn ngữ dựa trên tiền huấn luyện không giám sát, đạt kết quả SOTA

Tiêu đề gốc:Improving language understanding with unsupervised learning

Tóm tắt AI

OpenAI đã dùng một hệ thống tổng quát, không phụ thuộc tác vụ, kết hợp Transformer với tiền huấn luyện không giám sát để đạt kết quả SOTA trên nhiều tác vụ ngôn ngữ và phát hành mã nguồn mở hệ thống này. OpenAI cho rằng kết quả này chứng minh hiệu quả của việc kết hợp học có giám sát với tiền huấn luyện không giám sát, đồng thời hy vọng thúc đẩy nghiên cứu tiếp theo trên các bộ dữ liệu lớn hơn và đa dạng hơn.

Thông tin chính

  • OpenAI đã dùng một hệ thống tổng quát,không phụ thuộc tác vụ,kết hợp Transformer với tiền huấn…
  • OpenAI cho rằng kết quả này chứng minh hiệu quả của việc kết hợp học có giám sát với tiền huấn…
  • đồng thời hy vọng thúc đẩy nghiên cứu tiếp theo trên các bộ dữ liệu lớn hơn và đa dạng hơn.

Tóm tắt nhanh

Đăng lúc
Cập nhật lúc
Nguồn
OpenAI:官网动态(RSS · 排除企业/客户案例)
Danh mục
Ra mắt mô hình
Điểm AI
75
Đọc bản gốc Đọc toàn văn tại nguồn tin gốc
Lý do đề xuất

原文说明了方法组合与开放发布,读者可以据此理解无监督预训练思路在多项语言任务上的效果。

Thực thể liên quan

Nguồn và bản quyền

Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.

Liên kết gốc · Mục AIHOT

Cách trích dẫn

Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.

Orange News: OpenAI phát hành mô hình hiểu ngôn ngữ dựa trên tiền huấn luyện không giám sát, đạt kết quả SOTA. 11 tháng 6 2018. https://new.nat6.net/vi/news/kqw3u0zsdrdahfl69kk21gyhw/

Xem tất cả →