Fine-tuning ng NVIDIA Cosmos Predict 2.5: pagbuo ng robot video gamit ang LoRA/DoRA
Orihinal na pamagat:Fine-Tuning NVIDIA Cosmos Predict 2.5 with LoRA/DoRA for Robot Video Generation
AI summary
Ang NVIDIA Cosmos Predict 2.5 ay isang 2B parameter na world model na nakakabuo ng pisikal na makatwirang video batay sa teksto, larawan, o video clip. Sa pamamagitan ng LoRA o DoRA, naglalagay ng trainable adapter sa attention layer (to_q, to_k, to_v, to_out.0) at feedforward layer ng DiT, ini-freeze ang lahat ng base weight, at kayang tapusin ang parameter-efficient fine-tuning sa isang 80GB GPU, na umiiwas sa mataas na gastos at catastrophic forgetting ng full fine-tuning. Gumagamit ang prosesong ito ng diffusers at accelerate library, at ginagamit ang 92 robot manipulation video training set at 50 (prompt, image) test pair para sa fine-tuning, at ipinapakita kung paano gumamit ng fine-tuned model para makabuo ng synthetic robot trajectory para suportahan ang downstream robot learning task. Sinusuportahan ang single GPU at multi-GPU training, at hindi na kailangang mag-retrain kapag nagpapalit ng adapter para sa iba't ibang domain.
Mahahalagang impormasyon
- Ang NVIDIA Cosmos Predict 2.
- 5 ay isang 2B parameter na world model na nakakabuo ng pisikal na makatwirang video batay sa…
- Sa pamamagitan ng LoRA o DoRA,naglalagay ng trainable adapter sa attention layer…
- 0) at feedforward layer ng DiT,ini-freeze ang lahat ng base weight,at kayang tapusin ang…
- Gumagamit ang prosesong ito ng diffusers at accelerate library,at ginagamit ang 92 robot…
Mabilisang tingin
- Na-publish noong
- Na-update noong
- Pinagmulan
- Hugging Face 社区博客(混合发现)
- Kategorya
- Mga Tutorial at Tip
- AI na marka
- 67
这篇教程把微调Cosmos Predict 2.5的方法从头到尾讲清楚了,做机器人合成数据的同行可以直接抄作业,LoRA/DoRA切换也很方便,值得收藏。
Kaugnay na Entity
Pinagmulan at copyright
Ang artikulong ito ay batay sa mga piling pamagat at AI summary mula sa pampublikong API ng AIHOT, may nakasaad na pinagmulan at backlink; ang copyright ng orihinal na teksto ay pag-aari ng orihinal na media at may-akda, hindi namin ginagaya ang buong teksto.
Paano banggitin
Kapag binabanggit ang artikulong ito, panatilihin ang pamagat, petsa at permanenteng link, at banggitin ang Orange News bilang pinagmulan.
Orange News: Fine-tuning ng NVIDIA Cosmos Predict 2.5: pagbuo ng robot video gamit ang LoRA/DoRA. 19 Mayo 2026. https://new.nat6.net/fil/news/cmpbfzxd4172bslnzzdo3g1lc/