NVIDIA 通過云端至機器人計算平臺驅動人形機器人技術,賦能物理 AI
全新 NVIDIA Isaac GR00T 人形機器人開源模型即將登陸 Hugging Face
COMPUTEX —— 2025 年 5 月 19 日 ——NVIDIA 今日發布以下全新技術:NVIDIA Isaac GR00T N1.5,這是 NVIDIA 首個開源、通用且完全可定制的人形機器人推理與技能基礎模型的首次更新;用于合成運動生成的 NVIDIA Isaac GR00T-Dreams Blueprint;以及用于加速人形機器人開發的 NVIDIA Blackwell 系統。
包括 Agility Robotics、波士頓動力、傅利葉、Foxlink、銀河通用、Mentee Robotics、NEURA Robotics、General Robotics、Skild AI 和小鵬機器人在內的多家人形機器人和機器人開發商,正采用 NVIDIA Isaac™ 平臺技術推動人形機器人的開發與部署。
NVIDIA 創始人兼首席執行官黃仁勛表示:“物理 AI 與機器人技術將開啟新一輪工業革命。從機器人的 AI 大腦到用于訓練的仿真環境,再到訓練基礎模型的 AI 超級計算機,NVIDIA 為機器人開發的每個環節提供核心技術支持。”
全新 Isaac GR00T 數據生成 Blueprint 填補數據鴻溝
黃仁勛在 COMPUTEX 主題演講中展示的 NVIDIA Isaac GR00T-Dreams,為開發者提供生成海量合成運動數據(即神經軌跡)的解決方案。物理 AI開發者可利用這些數據訓練機器人適應動態環境等新行為的能力。
開發者可首先針對其機器人對 Cosmos Predict 世界基礎模型(WFM)進行后訓練。隨后,GR00T-Dreams 僅需單張圖像作為輸入,即可生成機器人在新環境中執行新任務的視頻。該Blueprint 隨后提取動作 tokens(經壓縮且易于處理的數據片段),用于教會機器人如何執行這些新任務。
GR00T-Dreams Blueprint 是對今年三月 GTC 大會發布的 Isaac GR00T-Mimic Blueprint的補充。GR00T-Mimic 使用 NVIDIA Omniverse™ 和 NVIDIA Cosmos™ 平臺增強現有數據,而 GR00T-Dreams 則使用 Cosmos 生成全新數據。
全新 Isaac GR00T 模型推動人形機器人開發
NVIDIA 研究院借助 GR00T-Dreams Blueprint 生成合成訓練數據,僅用 36 小時就完成了 GR00T N1.5 模型的開發(基于 GR00T N1 更新)。相比之下,如果采用人工數據收集的方式,這一過程需耗時近三個月。
GR00T N1.5 展現出更強的環境適應性與工作空間配置調整能力,并可通過用戶指令識別目標物體。此次更新大幅提升了模型在工業物料分揀、存放等常見制造場景中的任務成功率。
當前,AeiRobot、Foxlink、光輪智能與 NEURA Robotics 等企業已率先采用 GR00T N 系列模型。AeiRobot 利用該模型使 ALICE4 機器人能夠理解自然語言指令,執行工業場景中的復雜抓取與放置工作流。Foxlink 借助該模型提升工業機械臂的靈活性與作業效率。光輪智能通過模型驗證合成數據,加速工廠場景人形機器人部署。NEURA Robotics 正評估模型性能,以加速家庭自動化系統的開發進程。
全新機器人仿真與數據生成框架加速訓練流程
開發高技能人形機器人需要海量多樣化數據支撐,但真實數據采集與處理成本高昂,且機器人需要在物理世界中進行測試,這也可能帶來成本和風險。
為幫助填補數據和測試缺口,NVIDIA 推出以下仿真技術:
NVIDIA Cosmos Reason:全新世界基礎模型(WFM),運用思維鏈推理技術,為物理 AI模型訓練生成準確、高質量的合成數據,現已在 Hugging Face 平臺開放。
Cosmos Predict 2:用于 GR00T-Dreams,即將登陸 Hugging Face。有助于顯著提升虛擬世界生成質量,減少模型幻覺現象。
NVIDIA Isaac GR00T-Mimic Blueprint:僅需少量人類示范動作,即可生成指數級規模的機器人操作合成運動軌跡。
開源物理 AI 數據集:包含用于開發 GR00T N 模型的24,000 條高質量人形機器人運動軌跡數據。
NVIDIA Isaac Sim™ 5.0:機器人仿真與合成數據生成框架,即將在 GitHub 上以開源形式提供。
NVIDIA Isaac Lab 2.2:開源機器人學習框架,將支持新的評估環境,以幫助開發者測試 GR00T N 模型性能。
Foxconn 與 Foxlink 正在使用 GR00T-Mimic Blueprint 加速其合成運動操作生成,優化工業機器人訓練流程。Agility Robotics、波士頓動力、傅利葉、Mentee Robotics、NEURA Robotics、小鵬機器人等正通過 NVIDIA Isaac Sim 與 Isaac Lab 推進人形機器人仿真訓練。Skild AI 運用仿真框架開發通用機器人智能系統,General Robotics 則將其集成到自身的機器人智能平臺。
開發者可將其機器人基礎模型部署至即將推出的 NVIDIA Jetson Thor 平臺,這一平臺有助于實現機器人端推理與運行時性能的加速。
最后,記得關注微信公眾號:鎂客網(im2maker),更多干貨在等你!
硬科技產業媒體
關注技術驅動創新
