在 CES 2024 上，Nvidia 在人工智慧和機器人領域取得重大突破，推出了突破性的基礎 AI 模型系列 Cosmos。這一發展標誌著 AI、機器人和自動駕駛汽車融合的關鍵時刻，有望重塑機器與物理世界的互動方式。
瞭解 Cosmos
Cosmos 代表了 AI 模型訓練的根本性轉變，重點關注物理世界的理解，而非創意內容生成。該平臺經過了令人印象深刻的2000萬小時真實世界鏡頭訓練，捕捉人類的動作、互動和操作。這種廣泛的訓練使 Cosmos 能夠生成逼真的模擬和3D模型，可用於訓練從人形機器人到自動駕駛汽車等各種自主系統。
訓練資料：2000萬小時的人類運動和互動影像資料
 |
|---|
| NVIDIA Cosmos 影片搜尋介面展示了各種夜間場景，展示了真實世界場景的模擬能力 |
Toyota 合作關係和汽車應用
在一項具有里程碑意義的發展中，Nvidia 與全球最大的汽車製造商 Toyota 建立了合作伙伴關係。這項合作將在多個 Toyota 車型中整合 Nvidia 的自動駕駛晶片和軟體。該合作將 Cosmos 與 Nvidia 的 Omniverse 物理模擬工具結合使用，能夠將數千次真實駕駛轉換為數十億英里的訓練資料。
整合功能：可與 Nvidia Omniverse 物理模擬工具相容
先進的機器人訓練
Cosmos 為機器人訓練引入了創新方法，特別是在工業環境中。該平臺可以從少量真實世界示例中生成合成訓練資料，使機器人學習新任務的效率顯著提高。這一功能對倉庫運營特別有價值，機器人可以透過模擬環境學習處理各種情況，包括事故識別和響應。
 |
|---|
| 一個機械臂握持方向盤，象徵著工業應用中機器人訓練的進步 |
行業採用和實施
包括人形機器人開發商 Agility 和 Figure AI，以及自動駕駛汽車公司如 Uber、Waabi 和 Wayve 在內的多家知名公司已經採用了 Cosmos。該平臺在 GitHub 上的開源可用性鼓勵了機器人社群更廣泛的採用和開發。
分發方式：在 GitHub 上作為開源專案提供
未來影響
Nvidia 執行長 Jensen Huang 認為自動駕駛汽車將成為第一個萬億美元規模的機器人市場。Cosmos 與新興技術（如 Apple Vision Pro 頭戴裝置）的結合用於捕捉人類演示，預示著機器人訓練將變得越來越直觀和高效。正如 Huang 所說，機器人領域的 ChatGPT 時刻即將到來，表明了這項技術的變革潛力。