英偉達近日正式推出了Cosmos平臺,這一創新舉措旨在為自動駕駛汽車和機器人等物理AI系統的開發提供強有力的支持。該平臺融合了生成式世界基礎模型(WFMs)、先進分詞器、安全保護機制以及高效的視頻處理流程。
據英偉達介紹,開發物理AI模型歷來成本高昂,且需依賴大量真實世界的數據和反復測試。Cosmos平臺中的世界基礎模型(WFM)為開發者開辟了一條新路徑,通過生成大量基于物理特性的逼真合成數據,簡化模型訓練和評估過程。開發者還可以對Cosmos WFM進行微調,以構建符合自身需求的定制模型。
目前,Cosmos平臺的模型已經開放許可,開發者可以在NVIDIA API目錄中預覽首批模型,同時也可從NVIDIA NGC?目錄或Hugging Face平臺下載模型系列和微調框架。這一舉措無疑將極大地促進AI模型的開發效率和靈活性。
英偉達還宣布,多家企業已成為Cosmos平臺的首批用戶,包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi、XPENG以及拼車巨頭Uber等。這些企業的加入,將進一步推動Cosmos平臺在實際應用中的驗證與優化。
Cosmos平臺的應用場景廣泛,其中包括視頻搜索和理解、生成合成數據、模型開發和評估以及預測和多宇宙模擬等。例如,在視頻搜索和理解方面,Cosmos平臺可以輕松幫助用戶查找特定訓練場景,如雪地路況或倉庫擁堵情況。在生成合成數據方面,基于物理學的逼真視頻數據生成,將為模型訓練提供更加豐富和真實的素材。Cosmos平臺還支持模型的開發和評估,以及通過多宇宙模擬預測所有可能的未來結果,從而幫助AI模型選擇最佳路徑。
隨著Cosmos平臺的推出,英偉達再次展示了其在AI領域的領導地位和技術創新實力。這一平臺不僅為開發者提供了便捷高效的工具,也為自動駕駛汽車和機器人等物理AI系統的未來發展奠定了堅實基礎。