【中信制造】NVIDIA将GPT-6 Astra引入Isaac机器人训练平台,探索AI Agent驱动的机器人研发流程 📌10月21日,NVIDIA宣布升级Is
- 序号:482
- 星球链接:打开网页
- 附件:图片 0,音频 0,文档 0
- 音频文件:无音频
图片
无图片
正文
【中信制造】NVIDIA将GPT-6 Astra引入Isaac机器人训练平台,探索AI Agent驱动的机器人研发流程
📌10月21日,NVIDIA宣布升级Isaac平台,推出结合ChatGPT Astra、Isaac及Cosmos的开源机器人学习工作流,支持GR00T 1.7强化学习、灵巧操作训练及Cosmos世界模型后训练。
1️⃣研发流程:Astra主要承担研发任务理解、工具调用和反馈迭代,而非直接取代机器人动作模型。根据NVIDIA此前技术文章,Astra可协调Omniverse工具自动补充仿真场景的语义标签、碰撞模型、物理属性及传感器配置,并根据仿真检查结果修正方案,减少人工场景搭建与调试工作。 2️⃣能力验证:NVIDIA此前利用Astra参与Unitree G1的Robo Olympics项目,结合Kimodo动作生成、SONIC全身控制与Newton物理引擎构建和优化运动控制器,其中单栏跨越任务在仿真中取得64%的成功率。此外,Astra还参与了机器人拆卸工具设计,以及真实房间采集数据向可交互仿真场景的转换。 3️⃣平台升级:本次同步推出Isaac Lab 3.0、Isaac OS、超2,000项SimReady资产及Human 1M数据集,并通过DGX Station提供本地训练与Agent工作流所需算力。
💡这一进展值得关注的是通用大模型在具身智能产业中的应用边界进一步拓展:除了机器人端的任务规划,大模型还可以作为研发Agent参与仿真环境构建、训练实验和结果验证。NVIDIA正在尝试将这一能力与自身模型、数据、仿真及算力平台结合,提升机器人训练流程的自动化程度。
总体总结
主题正文
- 【中信制造】NVIDIA将GPT-6 Astra引入Isaac机器人训练平台,探索AI Agent驱动的机器人研发流程
- 📌10月21日,NVIDIA宣布升级Isaac平台,推出结合ChatGPT Astra、Isaac及Cosmos的开源机器人学习工作流,支持GR00T 1.7强化学习、灵巧操作训练及Cosmos世界模型后训练。
- 1️⃣研发流程:Astra主要承担研发任务理解、工具调用和反馈迭代,而非直接取代机器人动作模型。
- 根据NVIDIA此前技术文章,Astra可协调Omniverse工具自动补充仿真场景的语义标签、碰撞模型、物理属性及传感器配置,并根据仿真检查结果修正方案,减少人工场景搭建与调试工作。
- 2️⃣能力验证:NVIDIA此前利用Astra参与Unitree G1的Robo Olympics项目,结合Kimodo动作生成、SONIC全身控制与Newton物理引擎构建和优化运动控制器,其中单栏跨越任务在仿真中取得64%的成功率。
- 3️⃣平台升级:本次同步推出Isaac Lab 3.0、Isaac OS、超2,000项SimReady资产及Human 1M数据集,并通过DGX Station提供本地训练与Agent工作流所需算力。
- 💡这一进展值得关注的是通用大模型在具身智能产业中的应用边界进一步拓展:除了机器人端的任务规划,大模型还可以作为研发Agent参与仿真环境构建、训练实验和结果验证。
- NVIDIA正在尝试将这一能力与自身模型、数据、仿真及算力平台结合,提升机器人训练流程的自动化程度。