NVIDIA 通過云端至機器人計算平臺驅(qū)動人形機器人技術(shù),賦能物理 AI

jh 5個月前 (05-20)

全新 NVIDIA Isaac GR00T 人形機器人開源模型即將登陸 Hugging Face

NVIDIA 通過云端至機器人計算平臺驅(qū)動人形機器人技術(shù),賦能物理 AI

COMPUTEX —— 2025 年 5 月 19 日 ——NVIDIA 今日發(fā)布以下全新技術(shù):NVIDIA Isaac GR00T N1.5,這是 NVIDIA 首個開源、通用且完全可定制的人形機器人推理與技能基礎(chǔ)模型的首次更新;用于合成運動生成的 NVIDIA Isaac GR00T-Dreams Blueprint;以及用于加速人形機器人開發(fā)的 NVIDIA Blackwell 系統(tǒng)。

包括 Agility Robotics、波士頓動力、傅利葉、Foxlink、銀河通用、Mentee Robotics、NEURA Robotics、General Robotics、Skild AI 和小鵬機器人在內(nèi)的多家人形機器人和機器人開發(fā)商,正采用 NVIDIA Isaac™ 平臺技術(shù)推動人形機器人的開發(fā)與部署。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛表示:“物理 AI 與機器人技術(shù)將開啟新一輪工業(yè)革命。從機器人的 AI 大腦到用于訓練的仿真環(huán)境,再到訓練基礎(chǔ)模型的 AI 超級計算機,NVIDIA 為機器人開發(fā)的每個環(huán)節(jié)提供核心技術(shù)支持。”

全新 Isaac GR00T 數(shù)據(jù)生成 Blueprint 填補數(shù)據(jù)鴻溝

黃仁勛在 COMPUTEX 主題演講中展示的 NVIDIA Isaac GR00T-Dreams,為開發(fā)者提供生成海量合成運動數(shù)據(jù)(即神經(jīng)軌跡)的解決方案。物理 AI開發(fā)者可利用這些數(shù)據(jù)訓練機器人適應(yīng)動態(tài)環(huán)境等新行為的能力。

開發(fā)者可首先針對其機器人對 Cosmos Predict 世界基礎(chǔ)模型(WFM)進行后訓練。隨后,GR00T-Dreams 僅需單張圖像作為輸入,即可生成機器人在新環(huán)境中執(zhí)行新任務(wù)的視頻。該Blueprint 隨后提取動作 tokens(經(jīng)壓縮且易于處理的數(shù)據(jù)片段),用于教會機器人如何執(zhí)行這些新任務(wù)。

GR00T-Dreams Blueprint 是對今年三月 GTC 大會發(fā)布的 Isaac GR00T-Mimic Blueprint的補充。GR00T-Mimic 使用 NVIDIA Omniverse™ 和 NVIDIA Cosmos™ 平臺增強現(xiàn)有數(shù)據(jù),而 GR00T-Dreams 則使用 Cosmos 生成全新數(shù)據(jù)。

全新 Isaac GR00T 模型推動人形機器人開發(fā)

NVIDIA 研究院借助 GR00T-Dreams Blueprint 生成合成訓練數(shù)據(jù),僅用 36 小時就完成了 GR00T N1.5 模型的開發(fā)(基于 GR00T N1 更新)。相比之下,如果采用人工數(shù)據(jù)收集的方式,這一過程需耗時近三個月。

GR00T N1.5 展現(xiàn)出更強的環(huán)境適應(yīng)性與工作空間配置調(diào)整能力,并可通過用戶指令識別目標物體。此次更新大幅提升了模型在工業(yè)物料分揀、存放等常見制造場景中的任務(wù)成功率。

當前,AeiRobot、Foxlink、光輪智能與 NEURA Robotics 等企業(yè)已率先采用 GR00T N 系列模型。AeiRobot 利用該模型使 ALICE4 機器人能夠理解自然語言指令,執(zhí)行工業(yè)場景中的復(fù)雜抓取與放置工作流。Foxlink 借助該模型提升工業(yè)機械臂的靈活性與作業(yè)效率。光輪智能通過模型驗證合成數(shù)據(jù),加速工廠場景人形機器人部署。NEURA Robotics 正評估模型性能,以加速家庭自動化系統(tǒng)的開發(fā)進程。

全新機器人仿真與數(shù)據(jù)生成框架加速訓練流程

開發(fā)高技能人形機器人需要海量多樣化數(shù)據(jù)支撐,但真實數(shù)據(jù)采集與處理成本高昂,且機器人需要在物理世界中進行測試,這也可能帶來成本和風險。

為幫助填補數(shù)據(jù)和測試缺口,NVIDIA 推出以下仿真技術(shù):

NVIDIA Cosmos Reason:全新世界基礎(chǔ)模型(WFM),運用思維鏈推理技術(shù),為物理 AI模型訓練生成準確、高質(zhì)量的合成數(shù)據(jù),現(xiàn)已在 Hugging Face 平臺開放。

Cosmos Predict 2:用于 GR00T-Dreams,即將登陸 Hugging Face。有助于顯著提升虛擬世界生成質(zhì)量,減少模型幻覺現(xiàn)象。

NVIDIA Isaac GR00T-Mimic Blueprint:僅需少量人類示范動作,即可生成指數(shù)級規(guī)模的機器人操作合成運動軌跡。

開源物理 AI 數(shù)據(jù)集:包含用于開發(fā) GR00T N 模型的24,000 條高質(zhì)量人形機器人運動軌跡數(shù)據(jù)。

NVIDIA Isaac Sim™ 5.0:機器人仿真與合成數(shù)據(jù)生成框架,即將在 GitHub 上以開源形式提供。

NVIDIA Isaac Lab 2.2:開源機器人學習框架,將支持新的評估環(huán)境,以幫助開發(fā)者測試 GR00T N 模型性能。

Foxconn 與 Foxlink 正在使用 GR00T-Mimic Blueprint 加速其合成運動操作生成,優(yōu)化工業(yè)機器人訓練流程。Agility Robotics、波士頓動力、傅利葉、Mentee Robotics、NEURA Robotics、小鵬機器人等正通過 NVIDIA Isaac Sim 與 Isaac Lab 推進人形機器人仿真訓練。Skild AI 運用仿真框架開發(fā)通用機器人智能系統(tǒng),General Robotics 則將其集成到自身的機器人智能平臺。

開發(fā)者可將其機器人基礎(chǔ)模型部署至即將推出的 NVIDIA Jetson Thor 平臺,這一平臺有助于實現(xiàn)機器人端推理與運行時性能的加速。

最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!

鎂客網(wǎng)


科技 | 人文 | 行業(yè)

微信ID:im2maker
長按識別二維碼關(guān)注

硬科技產(chǎn)業(yè)媒體

關(guān)注技術(shù)驅(qū)動創(chuàng)新

分享到