软件快讯
英伟达发布机器人基础模型GR00T 2及Isaac Lab 3.0,富士康与西门子启动工业测试
英伟达在11月9日于美国德克萨斯州奥斯汀举行的机器人学习会议上,发布了用于机器人控制的新基础模型GR00T 2及更新版仿真平台Isaac Lab 3.0。
在性能表现上,英伟达表示,GR00T 2在没有任何任务特定演示的情况下完成了50项基准任务中的40项。
与此同时,英伟达发布了开源框架Isaac Lab 3.0,用于在物理部署前于仿真环境中训练机器人。
在工业应用方面,Nexuni正在测试GR00T 2用于洗衣处理,Foxconn将其应用于服务器制造的工厂自动化,Siemens正在评估其工业用途。
来源:biggo
英伟达在11月9日于美国德克萨斯州奥斯汀举行的机器人学习会议上,发布了用于机器人控制的新基础模型GR00T 2及更新版仿真平台Isaac Lab 3.0。GR00T 2基于Cosmos平台构建,旨在获取对齐齿轮或插入电缆等精细运动技能,并将这些技能跨不同机器人本体迁移。该模型通过API为AI智能体提供工具以串联技能,并在步骤失败时进行恢复。目前,GR00T 2正处于试验阶段。[1]
在性能表现上,英伟达表示,GR00T 2在没有任何任务特定演示的情况下完成了50项基准任务中的40项。当每个任务提供单次演示时,其在50项任务上的平均成功率为71%;提供五次演示时,该数字上升至95%。此外,GR00T 2在包括RoboCasa365、RoboLab、RoboDojo和MolmoSpaces在内的基准测试中位列前三。其训练数据包括机器人数据以及10万小时的开源第一人称人类视频。[1]
与此同时,英伟达发布了开源框架Isaac Lab 3.0,用于在物理部署前于仿真环境中训练机器人。该平台通过集成Newton物理引擎,增加了对电缆和布料等可变形物体以及多关节手部的支持。研究人员可以在PhysX和Newton求解器之间切换,选择用于感知训练的渲染器,并将强化学习后训练库应用于GR00T等基础模型。英伟达称,Isaac Lab 3.0训练基于视觉的灵巧操作模型的速度比运行在PhysX引擎上的Isaac Lab 2.3快2.5倍。[1]
在工业应用方面,Nexuni正在测试GR00T 2用于洗衣处理,Foxconn将其应用于服务器制造的工厂自动化,Siemens正在评估其工业用途。MicroAGI使用经过强化学习微调的GR00T 2版本,通过YAM机械臂更换以太网电缆。[1]