Mga Tutorial at Tip

Fine-tuning ng NVIDIA Cosmos Predict 2.5: pagbuo ng robot video gamit ang LoRA/DoRA

Orihinal na pamagat:Fine-Tuning NVIDIA Cosmos Predict 2.5 with LoRA/DoRA for Robot Video Generation

AI summary

Ang NVIDIA Cosmos Predict 2.5 ay isang 2B parameter na world model na nakakabuo ng pisikal na makatwirang video batay sa teksto, larawan, o video clip. Sa pamamagitan ng LoRA o DoRA, naglalagay ng trainable adapter sa attention layer (to_q, to_k, to_v, to_out.0) at feedforward layer ng DiT, ini-freeze ang lahat ng base weight, at kayang tapusin ang parameter-efficient fine-tuning sa isang 80GB GPU, na umiiwas sa mataas na gastos at catastrophic forgetting ng full fine-tuning. Gumagamit ang prosesong ito ng diffusers at accelerate library, at ginagamit ang 92 robot manipulation video training set at 50 (prompt, image) test pair para sa fine-tuning, at ipinapakita kung paano gumamit ng fine-tuned model para makabuo ng synthetic robot trajectory para suportahan ang downstream robot learning task. Sinusuportahan ang single GPU at multi-GPU training, at hindi na kailangang mag-retrain kapag nagpapalit ng adapter para sa iba't ibang domain.

Mahahalagang impormasyon

  • Ang NVIDIA Cosmos Predict 2.
  • 5 ay isang 2B parameter na world model na nakakabuo ng pisikal na makatwirang video batay sa…
  • Sa pamamagitan ng LoRA o DoRA,naglalagay ng trainable adapter sa attention layer…
  • 0) at feedforward layer ng DiT,ini-freeze ang lahat ng base weight,at kayang tapusin ang…
  • Gumagamit ang prosesong ito ng diffusers at accelerate library,at ginagamit ang 92 robot…

Mabilisang tingin

Na-publish noong
Na-update noong
Pinagmulan
Hugging Face 社区博客(混合发现)
Kategorya
Mga Tutorial at Tip
AI na marka
67
Basahin ang orihinal Basahin ang buong artikulo sa orihinal na pinagmulan
Dahilan ng rekomendasyon

这篇教程把微调Cosmos Predict 2.5的方法从头到尾讲清楚了,做机器人合成数据的同行可以直接抄作业,LoRA/DoRA切换也很方便,值得收藏。

Kaugnay na Entity

Pinagmulan at copyright

Ang artikulong ito ay batay sa mga piling pamagat at AI summary mula sa pampublikong API ng AIHOT, may nakasaad na pinagmulan at backlink; ang copyright ng orihinal na teksto ay pag-aari ng orihinal na media at may-akda, hindi namin ginagaya ang buong teksto.

Link ng orihinal · Entry sa AIHOT

Paano banggitin

Kapag binabanggit ang artikulong ito, panatilihin ang pamagat, petsa at permanenteng link, at banggitin ang Orange News bilang pinagmulan.

Orange News: Fine-tuning ng NVIDIA Cosmos Predict 2.5: pagbuo ng robot video gamit ang LoRA/DoRA. 19 Mayo 2026. https://new.nat6.net/fil/news/cmpbfzxd4172bslnzzdo3g1lc/

Tingnan lahat →