英偉達在本周一的SIGGRAPH大會上,為機器人開發者帶來了一系列全新的AI模型和基礎設施,這些創新成果引發了廣泛關注。其中,Cosmos Reason模型尤為引人注目,這是一款專為物理AI應用和機器人設計的視覺語言模型,其參數規模達到了驚人的70億。
除了Cosmos Reason,英偉達還推出了Cosmos Transfer-2模型,這是對現有Cosmos世界模型系列的又一重要補充。Cosmos Transfer-2模型能夠高效地從3D模擬場景或空間控制輸入中生成合成數據,同時,其精簡版在速度優化上更是表現出色。這些模型的主要功能是創建用于訓練機器人和AI智能體的合成文本、圖像和視頻數據集。
Cosmos Reason憑借其強大的記憶能力和對物理原理的深刻理解,為機器人和AI智能體賦予了“推理”能力。這意味著它們能夠作為規劃模型,預測具身智能體可能采取的后續步驟。英偉達表示,該模型在數據策劃、機器人規劃和視頻分析等領域具有廣泛應用前景。
英偉達還發布了一款全新的神經重建庫,該庫包含一種先進的渲染技術,開發者可以利用傳感器數據以3D形式模擬現實世界。這一技術已被整合進廣受歡迎的開源模擬器CARLA中。同時,英偉達還更新了Omniverse軟件開發工具包,為開發者提供了更多便利。
在機器人工作流程方面,英偉達推出了兩款新服務器。其中,Nvidia RTX Pro Blackwell Server專為機器人開發工作負載設計,提供了統一的架構;而Nvidia DGX Cloud則是一個基于云的管理平臺,為開發者提供了更加靈活和高效的工作環境。
英偉達此次深入機器人領域的舉措,標志著該公司在尋找AI GPU新應用場景方面取得了重要進展。這些新發布的產品不僅超越了現有的AI數據中心應用,更為機器人和AI智能體的發展注入了新的活力。