科技新聞訊 3月19日消息,據(jù)國外媒體報道,英偉達周一在圣何塞會議中心舉辦的GTC大會上推出了多模態(tài)人工智能Project GR00T,能夠通過先進的基礎(chǔ)模型為未來的人形機器人提供動力。
在周一舉行的活動中, 英偉達演示了采用Project GR00T的人形機器人,能夠把文本、語音、視頻甚至現(xiàn)場演示作為輸入,讓機器人完成特定的操作任務(wù)。Project GR00T在英偉達的Isaac機器人平臺工具的幫助下開發(fā),其中包括一個用于強化學(xué)習(xí)的新Isaac實驗室。
英偉達首席執(zhí)行官黃仁勛在聲明中表示:“為通用人形機器人構(gòu)建基礎(chǔ)模型是當(dāng)今人工智能領(lǐng)域最令人興奮的問題之一。它把技術(shù)匯聚到一起,讓世界各國的領(lǐng)先機器人專家朝著通用人形機器人技術(shù)邁出巨大步伐。”
為了幫助企業(yè)成功運營GR00T,英偉達還發(fā)布了專門用于人形機器人的芯片Jetson Thor。此外,該公司還分享了一些引人注目的進展,如用于構(gòu)建人工智能驅(qū)動的工業(yè)操縱臂以及能夠在非結(jié)構(gòu)化環(huán)境中導(dǎo)航的機器人。
對英偉達Project GR00T有什么期待?
雖然名字看起來像漫威漫畫旗下的超級英雄格魯特(Groot),但它的全稱實際上是“Generalist Robot 00 Technology”。據(jù)英偉達稱,GR00T旨在理解自然語言文本、語音、視頻和現(xiàn)場演示,以模仿人類運動--協(xié)調(diào)性、靈活性和其他技能--并產(chǎn)生通用動作來導(dǎo)航、適應(yīng)現(xiàn)實世界并與之互動。這不僅將增強人形機器人的能力,而且使開發(fā)和部署它們變得非常容易。本質(zhì)上,以文本和演示作為輸入,擁有訪問權(quán)限的任何人都可以對機器人進行編程。
在英偉達首席執(zhí)行官黃仁勛的GTC主題演講中,他展示了多個由GR00T驅(qū)動的人形機器人來完成各種任務(wù),它們包括來自Agility Robotics、Apptronik、Fourier Intelligence和Unitree Robotics的機器人。英偉達嵌入式和邊緣計算副總裁迪普塔拉(Deepu Talla)向參會記者簡要介紹了GR00T,指出該項目利用了生成式人工智能和Transformer中最新技術(shù),但沒有分享其全部功能。
值得注意的是,作為生成式人工智能領(lǐng)域最知名的公司之一,OpenAI也在致力于人形機器人的開發(fā),并支持了該領(lǐng)域的兩家初創(chuàng)公司:1X Technologies和Figure。Figure最近發(fā)布了該公司首款OpenAI大模型加持的人形機器人,并發(fā)布了一段視頻,吸引了全球科技界的目光。在視頻中,機器人Figure 01可以聽懂人類的命令和提問,動作流暢且有邏輯地遞給人類蘋果、將垃圾收拾進筐子里、將杯子和盤子歸置放在瀝水架上。英偉達周一證實,F(xiàn)igure和OpenAI都在與該公司在人形機器人項目上進行合作。
塔拉周一在接受外媒采訪時表示,該公司不能分享有關(guān)內(nèi)部架構(gòu)的更多細節(jié),但未來將在功能方面分享更多信息。他還指出,目前只有選定的人形機器人開發(fā)者可以提前訪問該模型,但他們計劃很快把GR00T擴展到更多人形機器人當(dāng)中。
為了確保人形機器人可以運行GR00T等復(fù)雜的多模態(tài)模型,Nvidia還推出了用于人形機器人的Jetson Thor計算平臺;谟ミ_的Thor SoC,該計算平臺包括一個高性能CPU集群和基于英偉達Blackwell架構(gòu)的下一代GPU,擁有Transformer引擎,達到800 Teraflop(每秒1萬億次浮點運算)。塔拉表示,該系統(tǒng)的GPU性能比上一版本Jetson Orin高8倍。
GR00T的核心是全新的Isaac機器人工具
為了實現(xiàn)GR00T項目,英偉達開發(fā)了自己的Isaac機器人平臺。該平臺為開發(fā)人員提供了一個強大的端到端平臺,用于開發(fā)、模擬和部署人工智能機器人。
英偉達表示,具體而言,它利用其基于Isaac Sim的全新Isaac實驗室,通過在GPU加速的虛擬環(huán)境中進行并行模擬來測試和訓(xùn)練該模型,并利用OSMO計算協(xié)調(diào)服務(wù)來同時管理英偉達DGX和英偉達OVX的訓(xùn)練和模擬工作負載。
除這些功能外,Isaac機器人平臺還獲得了兩個用例定向產(chǎn)品--Isaac Manipulator和Isaac Perceptor。根據(jù)塔拉的解釋,Isaac Manipulator提供了GPU加速的庫和專用的基礎(chǔ)模型,幫助機械臂制造商通過最先進的運動和靈巧性來改進產(chǎn)品。它包括旨在檢測物體、估計它們的6D姿勢、跟蹤它們甚至做出密集預(yù)測。
另一方面,Isaac Perceptor承擔(dān)了通過多攝像頭、360度視覺功能引導(dǎo)機器人在非結(jié)構(gòu)化環(huán)境完成任務(wù)--通過基于人工智能的3D感知和環(huán)繞視覺加速算法提供。英偉達通過其Nova Orin DevKit提供該技術(shù),并同ArcBest、比亞迪和KION Group等多個合作伙伴合作,幫助他們在制造等過程中推進自主移動機器人功能。
ArcBest首席創(chuàng)新官兼ArcBest Technologies總裁邁克爾紐斯特(Michael Newcity)在聲明中表示:“在我們的Vaux Smart Autonomy AMR叉車和前移式叉車中使用Isaac Perceptor平臺,可以在跨倉庫、配送中心和制造設(shè)施的物料搬運過程中實現(xiàn)更好的感知、語義感知導(dǎo)航和3D映射,實現(xiàn)障礙檢測。”
英偉達全新的Isaac平臺功能預(yù)計將在今年第二季度推出,而Project GR00T仍處于早期訪問階段。英偉達正在接受申請,使更多的人形開發(fā)者獲得該技術(shù),但該公司目前尚未公布該技術(shù)公開發(fā)布的時間表。(編譯/無忌)