NVIDIA 扩展 Isaac 机器人平台,Agile Robots 发布基于 Isaac GR00T 与 Jetson Thor 的 Agile ONE SN 人形参考平台
NVIDIA Advances Isaac Platform for General-Purpose Robotics With New Reference Humanoid, Frameworks, Simulation Pipelines and Data
NVIDIA 在 GTC Berlin 宣布扩展 Isaac 开放机器人开发平台,Agile Robots 同步发布人形参考平台 Agile ONE SN,预配置 NVIDIA Isaac GR00T 并由 Jetson Thor 驱动,计划集成 NVIDIA Halos 安全系统。Agile ONE SN 高 1.40 米、重 40 公斤、全身 31 个自由度,双臂各 3 公斤载荷。
AI 生成摘要 · 以原文为准
官方公告汇总了 Isaac 平台新增的参考人形平台、学习框架与数据集,并给出 Agile ONE SN 的参数和上市时间表。
新闻摘要:
- Agile Robots 发布 Agile ONE SN,一款基于 NVIDIA Isaac GR00T 和 NVIDIA Jetson Thor 构建的仿人参考平台,并计划集成 NVIDIA Halos 安全栈,为开发者和研究人员提供面向前沿仿人机器人开发与验证的完整平台。
- NVIDIA Isaac 平台新增 Isaac OS 运行时、面向机器人学习的 Isaac Lab 3.0 以及开源参考工作流,将 ChatGPT Astra 与 NVIDIA DGX Station 上的 NVIDIA Isaac 和 Cosmos 相结合,加速机器人数据的生成、训练与评估。
- 欧洲机器人生态系统,包括 ABB Robotics、Flexion、Hexagon Robotics、Humanoid、KUKA、NEURA Robotics、Sereact 和 Universal Robots 等领军企业,正在基于 NVIDIA 的开放机器人平台推进自主机器人系统的发展。
GTC 柏林大会——NVIDIA 今日宣布大幅扩展 NVIDIA Isaac™ 开放机器人开发平台,新增一款参考仿人机器人、数据集和运行时,并更新其 机器人学习 框架。
这些技术共同为开发者提供了一条从数据到部署的集成化路径,让通用型机器人更快地走进现实世界。
“通用机器人技术正以前所未有的速度发展——机器人领域的 ChatGPT 时刻即将到来,”NVIDIA 创始人兼首席执行官黄仁勋表示,“凭借 NVIDIA Isaac 这一全栈开放机器人平台,我们正在为开发者提供模型、数据、仿真工具和计算系统,将物理 AI 带入全球最大的各个产业。”
Agile ONE SN——面向研究的仿人机器人参考平台
Agile Robots 发布了 Agile ONE SN,这是一款全栈参考仿人机器人,预配置了 NVIDIA Isaac GR00T,并由 NVIDIA Jetson Thor™ 边缘 AI 平台提供动力。
机器人研究人员和开发者常常难以集成从开发到现实世界部署机器人技能所需的仿真、训练和部署等分散工具。Agile ONE SN 将这些工具和工作流统一在单一平台上,将搭建时间从数周缩短至数天。
Agile ONE SN 的特性:
- Agile ONE S 仿人机器人本体,身高 1.40 米(4.59 英尺),体重 40 千克(88 磅),拥有 31 个自由度,每条手臂负载 3 千克。
- 双 WUJI Hand 2 五指灵巧手,每只手提供 20 个自由度、1kHz 力控制和触觉感知,实现灵巧操作。
- NVIDIA Jetson Thor 机载计算,提供 2,070 FP4 TFLOPS 的算力和 128GB 统一内存,用于机载推理和实时控制。
- 多模态感知,包括头部和腕部摄像头、激光雷达传感器和惯性测量单元,帮助机器人感知并与周围环境互动。
- NVIDIA Isaac GR00T 平台,包含 GR00T 基础模型、从数据采集到部署的完整工作流,以及用于协调运动的全身控制。
- 安全能力,计划将机器人端安全协议与面向机器人技术的 NVIDIA Halos 全栈安全系统集成。
“人形机器人的突破在于大规模实用性:一台可适应的机器,能学习多种技能,并在为人类建造的各种环境中工作,”Agile Robots 创始人兼 CEO Zhaopeng Chen 表示。“今天,Agile Robots 推出了 Agile ONE SN,一款基于 NVIDIA Isaac GR00T 构建、由 Jetson Thor 驱动的全栈开源参考人形机器人,为开发者提供了一个现成的系统,用于创建、训练和验证让人形机器人投入工作所需的能力。”
Agile ONE SN 计划于 2027 年初上市,旨在推进前沿人形机器人的研发,斯坦福大学和苏黎世联邦理工学院等领先机构均对此表现出兴趣。
NVIDIA 新技术加速机器人学习——从数据到部署
NVIDIA 新技术帮助开发者生成训练数据、扩展机器人学习、构建仿真环境并部署机器人应用,缩短了解决方案的落地时间。
- SimReady Central Library 提供超过 2,000 个可用于仿真的机器人和工厂资产,而 Human 1M Dataset 包含多样化的人类活动、同步的三视角视频和 3D 手部追踪。两者均可在 Hugging Face 上获取,完整的 Human 1M Dataset 则面向 Cosmos Coalition 合作伙伴开放。
- NVIDIA Isaac Lab 3.0 现已全面发布,提供一个开源、面向智能体的学习框架,通过多 GPU 工作流和包括 Newton 与 NVIDIA PhysX™ 在内的物理引擎,从桌面到数据中心训练和优化机器人策略。
- NVIDIA Isaac OS 是一个基于 NVIDIA Holoscan 构建的开源运行时框架,连接 AI、传感器、控制器和机器人硬件,为从仿真到实体机器人提供确定性的实时性能。
- NVIDIA 正在为 NVIDIA DGX Station™ 发布三个开源参考工作流,帮助开发者通过强化学习优化 GR00T 1.7 模型、在 NVIDIA Isaac Lab 中训练 灵巧操作 技能,以及使用 ChatGPT Astra 对 NVIDIA Cosmos™ 世界模型进行后训练以生成合成数据。
- NVIDIA Halos 提供一个基于 NVIDIA IGX Thor™ 构建的全栈安全平台,帮助自动驾驶汽车和机器人从开发走向更安全的大规模现实部署。
Hugging Face 上的 SimReady Central Library 包含来自 Comau、FANUC、ForgeCAD、Franka Robotics、LG Electronics、Palatial、Robotiq、Standard Bots、Universal Robots 和 Vertiv 的可用于仿真的资产。
NVIDIA 在 DGX Station 上运行的开源机器人学习参考工作流将获得 1X、Agile Robots、Humanoid、Maven Robotics、Mentee、MicroAGI、Rhoda、Sereact 和 Skild AI 解决方案的支持。
机器人合作伙伴正在将 NVIDIA Halos 集成到其安全架构中,包括 Agile Robots、Agility、Dexory、FORT Robotics 和 KION,用于仓库机器人安全。SICK 正在评估 Halos,以提升工业机器人的动态安全性,帮助它们响应固定区域之外的动态变化。
研华与 NexCOBOT 正在开发基于 NVIDIA IGX 的工业计算平台,而 Reynolds & Moore、埃森哲和 TÜV SÜD 正在加速工业物理 AI 安全部署的认证流程。
欧洲机器人领军企业基于 NVIDIA 开放技术构建
ABB 机器人 正在将 NVIDIA Omniverse™ 库与 RobotStudio HyperReality 集成,在各类行业的机器人系统安装前进行仿真和虚拟调试。KUKA 集团 正在其 Visual Components FactoryLens 中使用 Omniverse 库,为工厂仿真工作流程添加实时渲染功能。Sereact 正在使用 Isaac GR00T 和 Cosmos Transfer 来训练和后训练其用于货物搬运的 Cortex 平台,运行在 Universal Robots 工业机械臂上。
通过 Jetson Thor、Holoscan Sensor Bridge、Halos 和 NVIDIA Isaac OS,Humanoid 正在工业试点前开发和验证机器人行为,Hexagon Robotics 正在构建 AEON 感知能力,包括遥操作视频、定位、建图和物体姿态检测,而 Bear Robotics 正在加速 KR1 的感知与模型执行,并通过 Kino-2 对 Isaac GR00T 进行后训练,应用于仓库、退货和工业工作流程。
丰田物料搬运欧洲 和 SoftServe 使用 Omniverse 和 NVIDIA Isaac Sim™ 框架开发自主物料搬运解决方案,将部署时间最多缩短 50%。Idealworks 正在利用 NVIDIA 开放模型和 Jetson 为工厂中的自主移动机器人开发记忆能力。Analog Devices Inc. (ADI) 正在使用 NVIDIA Jetson AGX Orin™ 和 cuVSLAM 库构建自主移动机器人。
Hugging Face 和 Pollen Robotics 正在使用 NVIDIA Isaac Lab、Isaac Sim 和 Newton 构建 Microduck——一款小型开源机器人,旨在帮助开发者和学生训练、修改和分享新的物理行为。Franka Robotics 正在使用 NVIDIA NIM™ 微服务和 Isaac Sim,将自然语言请求转化为其 Franka FR3 Duo 机器人系统上的动作。Bellboy 正在使用 Jetson 和 GR00T 为 Billie 提供动力——这是基于 Bellboy 物理 AI 基础设施打造的首个机器人队友,已部署在 Marriott、Hilton、IHG 和 OYO 运营的酒店中。
Flexion 正在使用 Isaac Lab 和 Newton 扩展 Reflect 的学习规模——Reflect 是其统一的机器人智能模型,结合推理与全身运动,可在不同机器人本体上执行复杂操作任务。Schaeffler 正在将其执行器技术作为 Newton 的独家基础组件,助力利用 NVIDIA Isaac Lab 和 Isaac Sim 加速人形机器人开发。
NEURA Robotics 正在使用 Isaac Sim 和 Isaac Lab 生成合成训练数据,并在仿真中训练机器人技能,用于其多模态基础模型 Neuron AI。
观看黄仁勋的 GTC 柏林主题演讲并探索各场分会。
来源:NVIDIA Newsroom · nvidianews.nvidia.com