説明
マトリックスニューヨークは、Googleストリートビューの画像を活用してニューヨーク市のインタラクティブなビデオワールドモデルを作成する高度なツールです。3D車両レンダリングと運動学的自転車モデルの組み合わせを使用して、車両制御と軌道をシミュレートするように設計されています。このツールは、指定された場所の最寄りのGoogleストリートビューパノラマを取得し、近くの車両を除去し、追跡カメラの下で3D車両を挿入します。このプロセスにより、ユーザーは事前にトレーニングされたインタラクティブなビデオワールドモデルを通じて都市を運転し、都市環境に対するユニークな視点を提供します。
続きを読む
マトリックスニューヨークには、マトリックスゲーム3.0、マトリックスゲーム3.5、パノワールドの3つの異なるモデルがあります。各モデルは同じストリートビューの観察とコントローラーの軌道を受け取り、使用されるアクションアダプターのみが異なります。マトリックスゲーム3.0はキーボードとカメラのヨーアクションを使用し、マトリックスゲーム3.5はカメラから世界への軌道を採用し、パノワールドはフル360°パノラマにわたる変換軌道を利用します。これらのモデルは、ファインチューニングなしで単一のGPUで動作するように設計されており、効率的なパフォーマンスを確保しています。
このツールのインタラクティブビューアは、ユーザーが地図またはリスト上で場所を選択し、その展開を再生できるようにし、ビデオの下のパネルには表示されたフレームでのコントローラー入力が表示されます。この機能は、モデルがどのように機能し、仮想環境と相互作用するかの包括的なビューを提供します。
マトリックスニューヨークは、都市計画、交通分析、バーチャルリアリティアプリケーションに特に役立ち、ニューヨーク市の街の詳細で没入感のある体験を提供します。ただし、ツールには制限があり、合成されたエゴ車両が生成されたコンテンツと相互作用しない2Dレイヤーであることや、大きな見出しの変更が交差点からカメラをファサードに向ける可能性があるため、特定のシナリオでのツールの効果が制限されることに注意することが重要です。
- カテゴリーAI動画生成ツール
- 料金モデルオープンソース
- デプロイクラウド
- プラットフォームWeb
マトリックスニューヨークの主要機能
Googleストリートビュー統合
3D車両レンダリング
運動学的自転車モデル
インタラクティブビデオワールドモデル
単一GPU動作
3つの異なるモデル
インタラクティブビューア
Apache-2.0ライセンス
マトリックスニューヨークの使い方は?
場所を選択: 地図またはリスト上で場所を選択します
パノラマを取得: 最寄りのGoogleストリートビューパノラマを取得します
車両を除去: 近くの車両を排除します
3D車両を挿入: 追跡カメラの下で3D車両をレンダリングします
制御をシミュレート: 車両制御のために運動学的自転車モデルを使用します
展開を表示: インタラクティブビューアで展開を再生します
マトリックスニューヨークの使用例
- 都市計画
- 交通分析
- バーチャルリアリティ
- 車両シミュレーション
- 教育ツール








