Interactive World Simulation with Cosmos for Physical AI
説明物理AI向けCosmosによるインタラクティブ世界シミュレーションの枠組み
要約本論文は、Cosmos世界基盤モデルをリアルタイムで対話可能な世界シミュレーションに適合させる共通フレームワークを提案する。行動やシーン制御に応じて視覚観測を逐次出力し、ユーザーや身体性エージェントが変化する仮想環境と対話できるようにする。カメラナビゲーション、ロボット操作、制御可能な動画変換、マルチビュー自動運転シミュレーションでの適用例を示し、コードとモデルの重みを公開している。