OpenAI phát hành mô hình hiểu ngôn ngữ dựa trên tiền huấn luyện không giám sát, đạt kết quả SOTA
Tiêu đề gốc:Improving language understanding with unsupervised learning
Tóm tắt AI
OpenAI đã dùng một hệ thống tổng quát, không phụ thuộc tác vụ, kết hợp Transformer với tiền huấn luyện không giám sát để đạt kết quả SOTA trên nhiều tác vụ ngôn ngữ và phát hành mã nguồn mở hệ thống này. OpenAI cho rằng kết quả này chứng minh hiệu quả của việc kết hợp học có giám sát với tiền huấn luyện không giám sát, đồng thời hy vọng thúc đẩy nghiên cứu tiếp theo trên các bộ dữ liệu lớn hơn và đa dạng hơn.
Thông tin chính
- OpenAI đã dùng một hệ thống tổng quát,không phụ thuộc tác vụ,kết hợp Transformer với tiền huấn…
- OpenAI cho rằng kết quả này chứng minh hiệu quả của việc kết hợp học có giám sát với tiền huấn…
- đồng thời hy vọng thúc đẩy nghiên cứu tiếp theo trên các bộ dữ liệu lớn hơn và đa dạng hơn.
Tóm tắt nhanh
- Đăng lúc
- Cập nhật lúc
- Danh mục
- Ra mắt mô hình
- Điểm AI
- 75
原文说明了方法组合与开放发布,读者可以据此理解无监督预训练思路在多项语言任务上的效果。
Thực thể liên quan
Nguồn và bản quyền
Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.
Cách trích dẫn
Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.
Orange News: OpenAI phát hành mô hình hiểu ngôn ngữ dựa trên tiền huấn luyện không giám sát, đạt kết quả SOTA. 11 tháng 6 2018. https://new.nat6.net/vi/news/kqw3u0zsdrdahfl69kk21gyhw/