其他

NVIDIA推出DreamGen引擎:让机器人在视频生成模型中"做梦"学习

原文标题:World modeling for robotics is incredibly hard because (1) control of humanoid robots & 5-finger han...

AI 摘要

NVIDIA发布DreamGen引擎(GR00T Dreams),将Sora/Veo等视频生成模型用作神经物理引擎,通过微调模型、模拟并行世界、恢复伪动作、训练基础模型四步流程,为机器人生成大规模合成训练数据。人形机器人仅凭单一拾放任务即可学会倾倒、折叠等22种新行为,在新动词和陌生环境中实现零样本泛化(成功率分别达43%和28%)。相比传统图形引擎,该方法以恒定计算成本处理可变形物体、流体等复杂交互,团队计划数周内完全开源。

关键信息

  • NVIDIA发布DreamGen引擎(GR00T Dreams),将Sora/Veo等视频生成模型用作神经物理引擎,通过微调模型、模拟并行世界、恢复伪动作、训练基础模型四步流程,为机器人生成大规模合…
  • 人形机器人仅凭单一拾放任务即可学会倾倒、折叠等22种新行为,在新动词和陌生环境中实现零样本泛化(成功率分别达43%和28%)。
  • 相比传统图形引擎,该方法以恒定计算成本处理可变形物体、流体等复杂交互,团队计划数周内完全开源
  • NVIDIA提出用视频生成模型为机器人“造梦”合成训练数据,实现零样本技能泛化

速览

发布时间
更新时间
来源
X:Jim Fan (@DrJimFan)
分类
其他
阅读原文 前往信息源阅读完整正文
推荐理由

NVIDIA提出用视频生成模型为机器人“造梦”合成训练数据,实现零样本技能泛化

相关实体

来源与版权

本文基于 AIHOT 公开 API 的精选标题与 AI 摘要整理,已注明来源并回链;原文版权归原媒体与作者所有,本站不镜像全文。

原文链接 · AIHOT 条目

如何引用

引用本文时请保留标题、日期与永久链接,并注明来源为橙子新闻。

橙子新闻:NVIDIA推出DreamGen引擎:让机器人在视频生成模型中"做梦"学习。2025年8月5日。https://new.nat6.net/news/cmnw1ysuy00zxslc3mc79ibuj/

查看全部 →
  • 我们的新 @OpenAI 开放模型

    OpenAI 发布两款新的开放模型(open models),官方推文称"Both of them"已上线,详见 openai.com/open-models。

    X:Noam Brown (@polynoamial)其他

  • 通过特征交互追踪注意力计算

    研究团队提出“QK归因”方法,将Transformer注意力头的关注模式解释为查询侧与键侧特征激活的双线性函数,并将其整合至原有的归因图中,从而弥补了原有方法忽略注意力计算关键信息的缺陷。案例研究验证了此前在归纳提示、反义词任务等场景中假…

    Anthropic:Transformer Circuits(可解释性研究)其他AI 评分 76

  • 智谱发布 GLM-4.5 系列模型并原生支持 SGLang

    智谱发布旗舰模型 GLM-4.5(355B/32B 激活)与 GLM-4.5-Air(106B/12B 激活),含 FP8 量化版本,即日起原生支持 SGLang 框架。采用 MoE 架构与 128k 上下文,在 12 项基准测试中分列第…

    LMSYS Blog其他

  • GPT-5:只管做事

    GPT-5 不再需要详细提示工程,只需给出目标即可自主完成任务。将 AI 置于主导地位,用户只需设定方向,具体执行由模型自行处理。

    Ethan Mollick:One Useful Thing(RSS)其他