英伟达推出通用多模态指令机器人模型: Project GR00T实现跨领域任务执行

视频来源:imxiaohu

GR00T详细信息:https://developer.nvidia.com/project-gr00t

GR00T模型引领机器人多模态指令理解新纪元,实现跨领域任务执行

GR00T模型,一款基于NVIDIA深度技术堆栈开发的创新之作,赋予了机器人理解多模态指令的能力,涵盖自然语言、视频和演示等多种形式。其强大的功能使得机器人能够执行一系列复杂任务,引领着机器人技术的新一轮革新。

英伟达推出通用多模态指令机器人模型: Project GR00T实现跨领域任务执行

在Isaac Lab中,GR00T模型得以在模拟环境中进行类人学习。借助Omniverse Isaac Sim这一前沿仿真平台,机器人能够在高度逼真的虚拟环境中进行学习和测试。这不仅显著加速了开发进程,还大幅降低了研发成本和风险,为机器人的实际应用铺平了道路。

在OSMO上,GR00T模型接受了高效的训练。OSMO作为一个全新的计算编排系统,为AI模型的训练提供了强大的管理和扩展能力。通过OSMO,开发者能够充分利用计算资源,实现模型训练的大规模化和高效化。这对于训练大型、复杂的AI模型至关重要,特别是在处理海量数据和执行复杂计算方面。

最终,经过精心训练的GR00T模型被部署到NVIDIA新开发的Jetson Thor边缘计算GPU芯片上。这款芯片专为像GR00T这样的AI模型设计,提供了强大的计算能力。通过边缘计算,机器人能够在数据产生的源头进行实时处理,大大降低了数据传输的延迟,提高了处理速度和效率。这使得机器人能够迅速响应多模态指令,高效执行各种任务。

目前,GR00T模型已经与多家知名企业展开合作,包括1X Technologies、Agility Robotics、Apptronik、Boston Dynamics、Figure AI、Fourier Intelligence、Sanctuary AI、Unitree Robotics以及XPENG Robotics等。这些合作将进一步推动GR00T模型在机器人领域的应用和发展,为人类带来更多的便利和惊喜。

https://heehel.com/aigc/figure-openai.html

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
今日签到
有新私信 私信列表
搜索