NVIDIA 擴 Cosmos,世界模型訓練工具鏈再補強

NVIDIA 於 22 日宣佈擴展 Cosmos 平台,新增訓練工具、模擬檢查點同 Cosmos Data Factory 數據管線,幫開發者打造世界模型(world model)——簡單講就係幫物理 AI 系統理解同模擬真實世界嘅底層模型。

NVIDIA 稱 Cosmos 喺六個不同開放模型排行榜都排入前五。

數據管線:五個雲端藍圖

世界模型靠多模態、多感官數據養大。Cosmos Data Factory 提供數據標註、篩選、擴充同評估嘅工具,Cosmos Curator(GPU 加速嘅影片訓練數據處理工具)加入多模態輸入支持。

Data Factory 提供五個雲端原生藍圖(blueprints,即預設設定模板),可喺 GitHub、Microsoft Azure、Nebius 同 CoreWeave 使用:

  • 自動駕駛數據集生成(處理駕駛數據、補難捕捉場景)
  • 圖像屬性擴充(改變物體外觀改善圖像搜尋)
  • 事件影片生成(由靜態圖生成罕見/危險場景)
  • 缺陷圖像生成(PCB、金屬、玻璃檢測)
  • 影片數據擴充(改天氣光線保留場景結構)

訓練:開放模型可微調同強化學習

喺 GTC Berlin,NVIDIA 將 Cosmos Framework 訓練、優化同部署工具以 agent skills(代理技能)形式擴展至更多開放模型,連同 Cosmos 3。開發者現可對 GR00T、Alpamayo、QWEN、Pi0.5 及兼容 Hugging Face 模型做微調、強化學習、蒸餾同量化,再以高效推理部署。

企業案例

Porsche 正領導跨 Volkswagen Group 品牌嘅共享自動駕駛數據飛輪,經 Voxel51 喺 Microsoft Azure 上用 Cosmos Data Factory,預期實車測試減多達九成、開發週期縮短八成五。ANYbotics 用藍圖生成 1,500 支合成影片訓練工業檢測機械人。Ultralytics 用合成缺陷圖重訓 YOLO 模型,改善缺陷定位同召回率。

以上成效數字均為廠商聲稱,本站未獨立實測。

阿調搞兩下

「減少 90% 實車測試」呢個條數夠吸引,但成個 Cosmos 生態都係 NVIDIA 自家平台,數據要過 Azure、Nebius、CoreWeave,模型要上自家 GPU,條鏈條金主都係同一間。開放係對,但開放嘅邊界由邊個劃?呢係值得跟住睇嘅位。