“下一波浪潮是物理AI?!庇ミ_CEO黃仁勛年內(nèi)多次強調(diào)。近日,英偉達在物理AI領(lǐng)域的部署加快了。
據(jù)英偉達的解釋,物理AI依托于神經(jīng)圖形、合成數(shù)據(jù)生成、物理模型、強化學(xué)習(xí)和AI推理技術(shù),是現(xiàn)代機器人技術(shù)、自動駕駛汽車和空間智能技術(shù)背后的引擎。在生成式AI、代理AI浪潮之后,就是物理AI浪潮。
在北京舉行的2025世界機器人大會上,英偉達Omniverse和仿真模擬技術(shù)副總裁Rev Lebaredian提到,物理AI將撬動萬億美元級的市場。大會期間,銀河通用首發(fā)了搭載英偉達Jetson AGX Thor芯片的機器人應(yīng)用。
在大洋彼岸加拿大溫哥華舉辦的計算機圖形大會SIGGRAPH2025上,英偉達則帶來16篇論文,物理AI是此次英偉達參會的主題詞。北京時間12日上午,三名英偉達AI 研究負責(zé)人在大會上發(fā)表演講,談及物理AI的演進。
物理AI與圖形研究之間有緊密聯(lián)系。英偉達圖形研究副總裁Aaron Lefohn表示,渲染研究已推動了逼真虛擬世界的創(chuàng)建,這些虛擬世界被用于訓(xùn)練先進的物理AI系統(tǒng),AI反過來則幫助研究人員基于圖像構(gòu)建3D世界。在圖形領(lǐng)域,2018年英偉達在SIGGRAPH展出第一個光線追蹤硬件,在9年間還將實時路徑追蹤性能提升了1萬倍。
英偉達AI研究副總裁Sanja Fidler表示,未來機器人將成為家庭成員,并重新定義工廠、倉庫、農(nóng)業(yè)的運作方式。AI和模擬研究之間有強烈的耦合關(guān)系。在機器人研究中,模擬起到重要作用。這是因為,在真實世界中訓(xùn)練機器人不安全,虛擬環(huán)境則不會造成傷害,且虛擬環(huán)境的訓(xùn)練效率高幾個數(shù)量級,在虛擬環(huán)境中花幾分鐘訓(xùn)練,或能匹敵機器人在現(xiàn)實世界生活10年的經(jīng)驗。這個虛擬環(huán)境需盡可能忠實地模擬真實世界,縮小虛擬與現(xiàn)實差距的一種方法是將現(xiàn)實世界轉(zhuǎn)化為數(shù)字形式,這依賴于視覺理解,將傳感器數(shù)據(jù)轉(zhuǎn)化為三維結(jié)構(gòu)。
“所有移動的物體,都可以變成機器人?!庇ミ_研究副總裁Ming-Yu Liu表示,對于不同機器人,人們有不同期望。對于工業(yè)機械臂,只期望它能在裝配線上執(zhí)行簡單任務(wù),對于自動駕駛汽車,期望它能應(yīng)對復(fù)雜交通狀況,而對于仿人機器人,則期望能同人類一般有多種技能且能操控環(huán)境?!叭绻墒紸I可以轉(zhuǎn)化為物理AI,關(guān)鍵將是訓(xùn)練數(shù)據(jù),破解數(shù)據(jù)問題的關(guān)鍵是合成數(shù)據(jù)?!?Ming-Yu Liu表示。
英偉達今年已在尋找更多GPU的落地應(yīng)用場景,在工業(yè)領(lǐng)域和機器人領(lǐng)域的動作越來越多,這兩個領(lǐng)域都與物理AI相關(guān)。在機器人領(lǐng)域,英偉達有Jetson Thor GPU機載計算機。有市場研究機構(gòu)的研究負責(zé)人告訴記者,即便很多芯片的算力都達到要求,但目前主流人形機器人的算力解決方案并不多,其中不少機器人采用了英偉達的方案,因為其生態(tài)較完善,可以節(jié)省廠商開發(fā)時間。
英偉達與物理AI相關(guān)的產(chǎn)品也在加快面世。今年1月,英偉達在全球消費電子展CES上推出了基礎(chǔ)世界模型Cosmos,用于生成合成自動駕駛等場景,輔助物理AI系統(tǒng)開發(fā)。此次SIGGRAPH,英偉達則推出了開源的70億參數(shù)推理視覺語言模型(VLM)Cosmos Reason,用于讓機器人和視覺AI代理工具理解物理世界并采取行動。同時,英偉達推出面向AI代理的Nemotron Nano2、Llama Nemotron Super 1.5模型和用于物理AI的新軟件庫Omniverse NuRec 3D高斯噴射庫。
硬件方面,英偉達還表示,思科、戴爾等將推出搭載RTX PRO 6000 Blackwell服務(wù)器版GPU的服務(wù)器,用于代理AI、工業(yè)和物理AI等企業(yè)工作負載。針對工程、AI和3D可視化等場景的 RTX PRO 4000 Blackwell SFF版和RTX PRO 2000 Blackwell GPU將于今年晚些時候推出。