3月19日消息,NVIDIA正式發布人形
機器人通用基礎模型 Project GR00T,旨在進一步推動其在機器人和具身智能方面的突破。
NVIDIA還發布了一款基于NVIDIA Thor系統級芯片(SoC)的新型人形機器人計算機Jetson Thor,并對NVIDIA Isaac™機器人平臺進行了重大升級,包括生成式AI基礎模型和仿真工具,以及AI工作流基礎設施。
NVIDIA創始人兼首席執行官黃仁勛表示:“開發通用人形機器人基礎模型是當今AI領域中最令人興奮的課題之一。世界各地的機器人技術領導者正在匯集各種賦能技術,致力于在人工通用機器人領域實現突破。”
GR00T驅動的機器人(代表通用機器人 00 技術)將能夠理解自然語言,并通過觀察人類行為來模仿動作——快速學習協調、靈活性和其它技能,以便導航、適應現實世界并與之互動。在GTC大會的主題演講中,NVIDIA創始人兼首席執行官黃仁勛展示了數臺這樣的機器人是如何完成各種任務的。
專為人形機器人打造
Jetson Thor是一個全新的計算平臺,能夠執行復雜的任務并安全、自然地與人和機器交互,具有針對性能、功耗和尺寸優化的模塊化架構。
該SoC包括一個帶有transformer engine的下一代GPU,其采用NVIDIA Blackwell架構,可提供每秒800萬億次8位浮點運算AI性能,以運行GR00T等多模態生成式AI模型。憑借集成的功能安全處理器、高性能CPU集群和100GB以太網帶寬,大大簡化了設計和集成工作。
NVIDIA正在為領先的人形機器人公司開發一個綜合的AI平臺,如1X Technologies、Agility Robotics、Apptronik、波士頓動力公司、Figure AI、傅利葉智能、Sanctuary AI、宇樹科技和小鵬鵬行等。
Agility Robotics聯合創始人兼首席機器人官Jonathan Hurst表示:“我們正處于歷史的轉折點,像Digit這樣以人為中心的機器人將永遠改變勞動力市場。現代AI將加速發展,為Digit這樣的機器人鋪平道路,在日常生活的各個方面幫助人類。我們很高興能與NVIDIA合作,投資于計算、仿真工具、機器學習環境和其他必要的基礎設施,讓機器人真正融入人們的日常生活。”
Sanctuary AI聯合創始人兼首席執行官Geordie Rose表示:“具身智能不僅有助于解決人類面臨的一些最大挑戰,還將創造目前超出我們能力范圍或想象的創新。如此重要的技術不應該建立在孤島之上,這就是為什么我們非常重視像NVIDIA這樣的長期合作伙伴。”
Isaac平臺的重大更新
GR00T使用的Isaac工具還能夠為在任何環境中的任何機器人創建新的基礎模型。這些工具包括用于強化學習的Isaac Lab和用于計算編排服務的OSMO。
訓練具身智能模型需要海量的真實數據和合成數據。新的Isaac Lab是一個GPU加速、性能優化的輕量級應用,基于Isaac Sim而構建,專門用于運行數千個用于機器人學習的并行仿真。
為了擴展異構計算的機器人開發工作負載,OSMO在分布式環境中協調數據生成、模型訓練和軟硬件在環工作流。
NVIDIA還發布了Isaac Manipulator和Isaac Perceptor等一系列機器人預訓練模型、庫和參考硬件。
Isaac Manipulator為機械臂提供了卓越的靈活性和模塊化AI功能,并提供了一系列強大的基礎模型和GPU加速庫。它提供了高達80倍的路徑規劃加速,零樣本感知提高了效率和吞吐量,使開發者能夠實現更多新的機器人任務的自動化。早期生態系統合作伙伴包括安川電機、泰瑞達旗下子公司優傲、PickNik Robotics、Solomon、READY Robotics和Franka Robotics。
Isaac Perceptor提供了多攝像頭和3D環繞視覺功能,這些功能正越來越多地被制造業和物流業中的自主移動機器人所采用,以提高效率和更好地保護工人,同時降低錯誤率和成本。早期采用者包括ArcBest、比亞迪和凱傲集團等,它們的目標是為物料搬運等操作帶來新的自主化水平。