英偉達(dá)一口氣開源多項(xiàng)機(jī)器人技術(shù)，與迪士尼合作的物理引擎也開源

夢晨 2025-10-02 11:44:54 來源：量子位

夢晨 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI

英偉達(dá)在機(jī)器人學(xué)習(xí)大會(huì)（CoRL）上一口氣發(fā)布了多項(xiàng)開源技術(shù)，其中最引人注目的是聯(lián)合Google DeepMind和迪士尼研究院開發(fā)的物理引擎Newton。

這次英偉達(dá)可謂是“全家桶”式發(fā)布：不僅有讓機(jī)器人擁有”物理直覺”的Newton引擎，還有賦予機(jī)器人人類推理能力的Isaac GR00T N1.6基礎(chǔ)模型，以及能夠生成海量訓(xùn)練數(shù)據(jù)的Cosmos世界基礎(chǔ)模型，直接瞄準(zhǔn)了機(jī)器人研發(fā)中最頭疼的幾個(gè)問題。

包括Boston Dynamics、Figure AI在內(nèi)的頂尖機(jī)器人公司，以及斯坦福、蘇黎世聯(lián)邦理工等知名高校都已經(jīng)開始使用這些技術(shù)。

Newton物理引擎：讓仿真環(huán)境”真實(shí)”起來

全球超過25萬機(jī)器人開發(fā)者都面臨著同一個(gè)難題：如何讓機(jī)器人在仿真環(huán)境中學(xué)到的技能，能夠安全可靠地遷移到現(xiàn)實(shí)世界？

人形機(jī)器人的關(guān)節(jié)結(jié)構(gòu)極其復(fù)雜，平衡控制難度極高，現(xiàn)有的物理引擎已經(jīng)跟不上需求了。

英偉達(dá)Omniverse與仿真技術(shù)副總裁Rev Lebaredian認(rèn)為：”人形機(jī)器人是物理AI的下一個(gè)前沿領(lǐng)域，需要在不可預(yù)測的世界中進(jìn)行推理，適應(yīng)環(huán)境并安全行動(dòng)?！?/p>

Newton引擎的出現(xiàn)恰好解決了這個(gè)痛點(diǎn)。這個(gè)由Linux Foundation管理的開源項(xiàng)目，基于英偉達(dá)的Warp和OpenUSD框架構(gòu)建，采用GPU加速技術(shù)。最厲害的是，它能夠仿真非常復(fù)雜的機(jī)器人動(dòng)作，比如在雪地或碎石路面行走，操控杯子和水果等細(xì)膩動(dòng)作。

蘇黎世聯(lián)邦理工學(xué)院機(jī)器人系統(tǒng)實(shí)驗(yàn)室、慕尼黑工業(yè)大學(xué)、北京大學(xué)等頂尖高校已經(jīng)率先使用Newton。光輪智能和仿真引擎公司Style3D也加入了早期用戶行列。

Isaac GR00T N1.6：機(jī)器人的“深度思考大腦”

讓機(jī)器人理解“幫我拿杯水”這樣的模糊指令，一直是業(yè)界的難題。

英偉達(dá)最新發(fā)布的Isaac GR00T N1.6開源模型，通過集成Cosmos Reason視覺語言模型，讓機(jī)器人擁有了接近人類的推理能力，即將在Hugging Face平臺上線。

它能夠利用已有知識、常識和物理原理，將模糊指令轉(zhuǎn)化為逐步執(zhí)行的計(jì)劃。更重要的是，機(jī)器人可以同時(shí)完成移動(dòng)和物體操控動(dòng)作，軀干和手臂擁有更大的活動(dòng)自由度，甚至能夠推開較重的房門。

目前Cosmos Reason下載量已超過100萬次，在Hugging Face的物理推理模型排行榜上穩(wěn)居榜首。英偉達(dá)還貼心地提供了開源物理AI數(shù)據(jù)集，包含數(shù)千條合成及真實(shí)世界的軌跡數(shù)據(jù)，目前下載量已經(jīng)突破480萬次。

AeiROBOT、Franka Robotics、LG Electronics等領(lǐng)先機(jī)器人制造商正在評估采用Isaac GR00T N系列模型。

訓(xùn)練革新：從抓取技能到全面測試

教會(huì)機(jī)器人抓取物體是機(jī)器人領(lǐng)域最具挑戰(zhàn)性的任務(wù)之一?；谟ミ_(dá)Omniverse構(gòu)建的Isaac Lab 2.3開發(fā)者預(yù)覽版，新增了靈巧抓取工作流。

這個(gè)工作流的巧妙之處在于采用了”自動(dòng)化課程體系”：從簡單任務(wù)開始，逐步提升難度，同時(shí)調(diào)整重力、摩擦力、物體重量等參數(shù)，讓機(jī)器人在不可預(yù)測的環(huán)境中也能掌握技能。Boston Dynamics的Atlas機(jī)器人就是通過這個(gè)工作流學(xué)習(xí)抓取技能，操控能力得到了顯著提升。

為了解決測試場景零散且簡單化的問題，英偉達(dá)與光輪智能聯(lián)合開發(fā)了Isaac Lab Arena，一個(gè)用于大規(guī)模實(shí)驗(yàn)和標(biāo)準(zhǔn)化測試的開源策略評估框架，讓開發(fā)者無需從零構(gòu)建系統(tǒng)，就能在仿真環(huán)境中開展復(fù)雜、大規(guī)模的評估。

全新AI基礎(chǔ)設(shè)施加持，機(jī)器人開發(fā)全面提速

硬件層面，英偉達(dá)也是下足了功夫。

GB200 NVL72機(jī)架式系統(tǒng)集成了36個(gè)Grace CPU和72個(gè)Blackwell GPU，各大云服務(wù)提供商已經(jīng)開始采用。RTX PRO服務(wù)器為機(jī)器人開發(fā)的各類工作負(fù)載提供統(tǒng)一架構(gòu)，RAI Institute已經(jīng)率先使用。

最讓人期待的是搭載Blackwell GPU的Jetson Thor，它能夠支持機(jī)器人運(yùn)行多個(gè)AI工作流，實(shí)現(xiàn)實(shí)時(shí)智能交互。Figure AI、銀河通用、Google DeepMind、宇樹科技等合作伙伴已經(jīng)開始采用這款產(chǎn)品。

在CoRL收錄的論文中，近半數(shù)引用了英偉達(dá)的相關(guān)技術(shù)?？▋?nèi)基梅隆大學(xué)、華盛頓大學(xué)等頂尖研究機(jī)構(gòu)都在使用英偉達(dá)的GPU、仿真框架和CUDA加速庫。斯坦福視覺與學(xué)習(xí)實(shí)驗(yàn)室的BEHAVIOR機(jī)器人學(xué)習(xí)基準(zhǔn)測試項(xiàng)目，以及北京大學(xué)開發(fā)的觸覺機(jī)器人仿真平臺Taccel，都基于英偉達(dá)技術(shù)開發(fā)。

從開源物理引擎到基礎(chǔ)模型，從訓(xùn)練工作流到硬件基礎(chǔ)設(shè)施，英偉達(dá)這次的”全棧式”布局，正在重新定義機(jī)器人研發(fā)的游戲規(guī)則。

機(jī)器人從實(shí)驗(yàn)室走向日常生活的道路，可能比我們想象的要短得多。

參考鏈接：
[1]https://developer.nvidia.com/newton-physics
[2]https://github.com/nvidia-cosmos/cosmos-reason
[3]https://www.nvidia.cn/ai/cosmos/