電子發(fā)燒友網(wǎng)報(bào)道（文/吳子鵬）在備受矚目的CES 2025上，NVIDIA在機(jī)器人領(lǐng)域宣布了重磅更新——Isaac GR00T Blueprint，幫助開發(fā)者更高效、高質(zhì)量地打造人形機(jī)器人。同時(shí)，NVIDIA創(chuàng)始人兼CEO黃仁勛在CES 2025上還宣布了NVIDIA“人形機(jī)器人朋友圈”——NVIDIA將會(huì)在人形機(jī)器人領(lǐng)域和包括中國(guó)公司小鵬、宇樹在內(nèi)的科技公司開展合作，共同推動(dòng)人形機(jī)器人產(chǎn)業(yè)發(fā)展。

Isaac GR00T Blueprint讓模仿學(xué)習(xí)更高效

人形機(jī)器人是一個(gè)全球關(guān)注的科技熱點(diǎn)，在中國(guó)市場(chǎng)，人形機(jī)器人是新質(zhì)生產(chǎn)力的代表之一。統(tǒng)計(jì)數(shù)據(jù)顯示，?2023年全球人形機(jī)器人市場(chǎng)規(guī)模約為21.6億美元，預(yù)計(jì)到2029年將達(dá)到324億美元??。到2035年，全球人形機(jī)器人的出貨量可能超過100萬(wàn)臺(tái)，達(dá)到140萬(wàn)臺(tái)。

在人形機(jī)器人開發(fā)領(lǐng)域，NVIDIA Isaac機(jī)器人開發(fā)平臺(tái)得到了很多開發(fā)者的認(rèn)可，成為這些開發(fā)者開發(fā)人形機(jī)器人的得力幫手。NVIDIA Isaac是一個(gè)由NVIDIA加速庫(kù)、應(yīng)用框架和AI模型組成的AI機(jī)器人開發(fā)平臺(tái)，可加速自主移動(dòng)機(jī)器人 (AMR)、機(jī)械手和機(jī)械臂以及人形機(jī)器人等AI機(jī)器人的開發(fā)。

NVIDIA Isaac包含了一系列的AI機(jī)器人開發(fā)工具和開發(fā)示例，其中參考應(yīng)用NVIDIA Isaac Sim允許開發(fā)者在基于物理的虛擬環(huán)境中設(shè)計(jì)、模擬、測(cè)試和訓(xùn)練基于AI的機(jī)器人和自主機(jī)器。NVIDIA Isaac Sim基于NVIDIA Omniverse 構(gòu)建，支持開發(fā)者構(gòu)建自己的自定義模擬器或?qū)⒑诵腎saac Sim技術(shù)集成到現(xiàn)有測(cè)試和驗(yàn)證管線中。

隨著Isaac GR00T Blueprint發(fā)布，NVIDIA Isaac平臺(tái)的性能得到了進(jìn)一步強(qiáng)化，Blueprint可幫助開發(fā)者生成海量的合成運(yùn)動(dòng)數(shù)據(jù)，以便通過模仿學(xué)習(xí)來(lái)訓(xùn)練人形機(jī)器人。如下圖所示，Isaac GR00T Blueprint通過GR00T-Teleop、GR00T-Mimic和GR00T-Gen工具流能夠幫助開發(fā)者高效完成人形機(jī)器人的模仿學(xué)習(xí)，可以更好地融入人類世界。

模仿學(xué)習(xí)也被稱為基于演示的學(xué)習(xí)（Learning By Demonstration），主要強(qiáng)調(diào)的是通過大量的參考數(shù)據(jù)，讓人形機(jī)器人等機(jī)器可以與環(huán)境進(jìn)行交互。一般而言，模仿學(xué)習(xí)主要包括行為克?。˙ehavior Cloning）和逆向強(qiáng)化學(xué)習(xí)（Inverse Reinforcement Learning），無(wú)論是哪種技術(shù)路徑，都需要大量的數(shù)據(jù)作為參考，然而在真實(shí)世界中收集這些廣泛、高質(zhì)量的數(shù)據(jù)集既繁瑣又耗時(shí)，而且成本往往高得令人卻步。

Isaac GR00T Blueprint解決了這一痛點(diǎn)，開發(fā)者只需少量人類示范，就能輕松生成海量的合成數(shù)據(jù)集。在這個(gè)應(yīng)用框架下，GR00T-Teleop用于借助虛擬現(xiàn)實(shí)設(shè)備捕捉人類演示動(dòng)作，并生成金標(biāo)準(zhǔn)；GR00T-Mimic用于將捕捉到的示范生成更大的合成運(yùn)動(dòng)數(shù)據(jù)集；GR00T-Gen用于通過域隨機(jī)化和3D提升技術(shù)，指數(shù)級(jí)擴(kuò)增這個(gè)數(shù)據(jù)集。

Isaac GR00T Blueprint融合了NVIDIA Cosmos

在Isaac GR00T Blueprint的GR00T-Gen工具流中，NVIDIA Omniverse和NVIDIA Cosmos是指數(shù)級(jí)擴(kuò)增數(shù)據(jù)集的關(guān)鍵。NVIDIA Cosmos是NVIDIA在CES 2025上最新發(fā)布的“世界基礎(chǔ)模型”，擁有一系列開放的預(yù)訓(xùn)練世界基礎(chǔ)模型，專為生成具有物理感知的視頻和物理AI開發(fā)所需的世界狀態(tài)而設(shè)計(jì)。

黃仁勛表示：“與大型語(yǔ)言模型一樣，世界基礎(chǔ)模型是推進(jìn)機(jī)器人和自動(dòng)駕駛汽車（AV）開發(fā)的基礎(chǔ)，但并非所有開發(fā)人員都有專業(yè)知識(shí)和資源來(lái)訓(xùn)練自己開發(fā)的方案?！薄拔覀儎?chuàng)建了Cosmos，以使物理AI更加普惠，并讓每個(gè)開發(fā)人員都能接觸到通用機(jī)器人技術(shù)?！?br />
NVIDIA Cosmos是專為物理AI而構(gòu)建的，據(jù)悉開發(fā)者可以基于NVIDIA Cosmos完成以下操作：
·視頻搜索與理解：使開發(fā)者能夠輕松從視頻數(shù)據(jù)中找到特定的訓(xùn)練場(chǎng)景。例如，他們可以搜索描繪雪地道路狀況或倉(cāng)庫(kù)擁堵情況的視頻。
·基于物理仿真合成逼真數(shù)據(jù)：使用Cosmos模型在NVIDIA Omniverse平臺(tái)上開發(fā)的3D場(chǎng)景中生成逼真的視頻。
·物理AI模型的開發(fā)和評(píng)估：無(wú)論是在基礎(chǔ)模型上構(gòu)建自定義模型，還是測(cè)試其在特定模擬場(chǎng)景下的表現(xiàn)，都可以使用Cosmos進(jìn)行強(qiáng)化學(xué)習(xí)以改進(jìn)模型。
·預(yù)見和“多元宇宙”模擬：使用Cosmos和Omniverse生成AI模型可能出現(xiàn)的每一種可能結(jié)果，幫助其選擇最佳和最準(zhǔn)確的路徑。

NVIDIA Cosmos的模型基于1800萬(wàn)億個(gè)數(shù)據(jù)單元進(jìn)行訓(xùn)練，其中包括200萬(wàn)小時(shí)的自動(dòng)駕駛、機(jī)器人、無(wú)人機(jī)拍攝的視頻以及合成數(shù)據(jù)。在人形機(jī)器人開發(fā)方面，NVIDIA Cosmos讓數(shù)據(jù)稀缺性不再是人形機(jī)器人開發(fā)的關(guān)鍵挑戰(zhàn)，開發(fā)者通過Cosmos上的文本、圖像和視頻到世界模型功能，就可以模擬各種逼真的任務(wù)場(chǎng)景，并完成人形機(jī)器人在這一場(chǎng)景下的訓(xùn)練學(xué)習(xí)。顯然，NVIDIA Cosmos將顯著縮短通用人形機(jī)器人的開發(fā)周期，讓通用人形機(jī)器人早日普及。

NVIDIA已經(jīng)宣布第一批采用NVIDIA Cosmos的生態(tài)伙伴，包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi和XPENG等人形機(jī)器人公司。

結(jié)語(yǔ)

Isaac GR00T Blueprint的推出解決了當(dāng)前困擾人形機(jī)器人開發(fā)者的關(guān)鍵難題——如何獲取海量數(shù)據(jù)完成人形機(jī)器人的模仿學(xué)習(xí)。通過整合GR00T-Teleop、GR00T-Mimic和GR00T-Gen工作流，Isaac GR00T Blueprint讓開發(fā)者只需少量人類示范，就能輕松生成海量的合成數(shù)據(jù)集。在Isaac GR00T Blueprint應(yīng)用框架下，最新發(fā)布的NVIDIA Cosmos則是數(shù)據(jù)指數(shù)級(jí)擴(kuò)增的關(guān)鍵。