英偉達(dá)近日正式推出了Cosmos平臺(tái)，這一創(chuàng)新舉措旨在為自動(dòng)駕駛汽車和機(jī)器人等物理AI系統(tǒng)的開發(fā)提供強(qiáng)有力的支持。該平臺(tái)融合了生成式世界基礎(chǔ)模型（WFMs）、先進(jìn)分詞器、安全保護(hù)機(jī)制以及高效的視頻處理流程。
據(jù)英偉達(dá)介紹，開發(fā)物理AI模型歷來成本高昂，且需依賴大量真實(shí)世界的數(shù)據(jù)和反復(fù)測試。Cosmos平臺(tái)中的世界基礎(chǔ)模型（WFM）為開發(fā)者開辟了一條新路徑，通過生成大量基于物理特性的逼真合成數(shù)據(jù)，簡化模型訓(xùn)練和評估過程。開發(fā)者還可以對Cosmos WFM進(jìn)行微調(diào)，以構(gòu)建符合自身需求的定制模型。
目前，Cosmos平臺(tái)的模型已經(jīng)開放許可，開發(fā)者可以在NVIDIA API目錄中預(yù)覽首批模型，同時(shí)也可從NVIDIA NGC?目錄或Hugging Face平臺(tái)下載模型系列和微調(diào)框架。這一舉措無疑將極大地促進(jìn)AI模型的開發(fā)效率和靈活性。
英偉達(dá)還宣布，多家企業(yè)已成為Cosmos平臺(tái)的首批用戶，包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi、XPENG以及拼車巨頭Uber等。這些企業(yè)的加入，將進(jìn)一步推動(dòng)Cosmos平臺(tái)在實(shí)際應(yīng)用中的驗(yàn)證與優(yōu)化。
Cosmos平臺(tái)的應(yīng)用場景廣泛，其中包括視頻搜索和理解、生成合成數(shù)據(jù)、模型開發(fā)和評估以及預(yù)測和多宇宙模擬等。例如，在視頻搜索和理解方面，Cosmos平臺(tái)可以輕松幫助用戶查找特定訓(xùn)練場景，如雪地路況或倉庫擁堵情況。在生成合成數(shù)據(jù)方面，基于物理學(xué)的逼真視頻數(shù)據(jù)生成，將為模型訓(xùn)練提供更加豐富和真實(shí)的素材。Cosmos平臺(tái)還支持模型的開發(fā)和評估，以及通過多宇宙模擬預(yù)測所有可能的未來結(jié)果，從而幫助AI模型選擇最佳路徑。
隨著Cosmos平臺(tái)的推出，英偉達(dá)再次展示了其在AI領(lǐng)域的領(lǐng)導(dǎo)地位和技術(shù)創(chuàng)新實(shí)力。這一平臺(tái)不僅為開發(fā)者提供了便捷高效的工具，也為自動(dòng)駕駛汽車和機(jī)器人等物理AI系統(tǒng)的未來發(fā)展奠定了堅(jiān)實(shí)基礎(chǔ)。
