Tutorial & Tips

MedQA: Model tanya jawab klinis berbasis AMD ROCm dan fine-tuning LoRA Qwen3-1.7B

Judul asli:MedQA: Fine-Tuning a Clinical AI on AMD ROCm — No CUDA Required

Ringkasan AI

Proyek ini menggunakan AMD Instinct MI300X (memori HBM3 192 GB) dan ROCm untuk melakukan fine-tuning LoRA pada model Qwen3-1.7B guna mewujudkan tanya jawab medis. Pelatihan hanya menggunakan 2000 sampel MedMCQA, selesai dalam sekitar 5 menit, hanya memperbarui sekitar 2,2 juta parameter (0,1443% dari total parameter model), sepenuhnya menggunakan presisi fp16 tanpa kuantisasi. Ekosistem HuggingFace (Transformers, PEFT, TRL, Accelerate) berjalan mulus di ROCm dan dapat langsung menggantikan CUDA tanpa mengubah kode. Model telah diunggah ke HuggingFace Hub dan tersedia Demo online.

Poin utama

  • Proyek ini menggunakan AMD Instinct MI300X (memori HBM3 192 GB) dan ROCm untuk melakukan…
  • 7B guna mewujudkan tanya jawab medis.
  • Pelatihan hanya menggunakan 2000 sampel MedMCQA,selesai dalam sekitar 5 menit,hanya memperbarui…
  • Ekosistem HuggingFace (Transformers,PEFT,TRL,Accelerate) berjalan mulus di ROCm dan dapat langsung…
  • Model telah diunggah ke HuggingFace Hub dan tersedia Demo online.

Ringkasan cepat

Waktu terbit
Waktu diperbarui
Sumber
Hugging Face 社区博客(混合发现)
Kategori
Tutorial & Tips
Skor AI
58
Baca aslinya Baca artikel lengkap di sumber aslinya
Alasan rekomendasi

一个月前的教程了,但如果你是 AMD 党想跑医疗微调,这篇把坑都踩完了,代码直接能复现,LoRA 适配器也挂在 Hub 上,拿来就能用。

Entitas Terkait

Sumber dan hak cipta

Artikel ini disusun berdasarkan judul pilihan dan ringkasan AI dari API publik AIHOT, dengan sumber yang dicantumkan dan tautan balik; hak cipta konten asli milik media dan penulis aslinya, situs ini tidak menyalin artikel secara penuh.

Tautan asli · Entri AIHOT

Cara mengutip

Saat mengutip artikel ini, sertakan judul, tanggal, dan tautan permanen, serta cantumkan sumber Orange News.

Orange News: MedQA: Model tanya jawab klinis berbasis AMD ROCm dan fine-tuning LoRA Qwen3-1.7B. 8 Mei 2026. https://new.nat6.net/id/news/cmownduwl00kdslkuwxyxo7l7/

Lihat semua →