Matrix-Zero：昆仑万維が中国初となる3Dワールドモデルを発表 194

昆仑万維は2025年2月14日にMatrix-Zeroワールドモデルを発表し、国内で初めて3Dシーン生成とインタラクティブな動画生成モデルを同時に発表した企業となりました。

このワールドモデルには2つのサブモデルが含まれています：1つは3Dシーン生成モデルで、ユーザーが入力した画像を自由に探索できるリアルな3Dシーンに変換し、全体の一貫性を備え、さまざまなスタイルの画像入力とスタイル転移をサポートし、動的な物理効果を生成できます。もう1つはインタラクティブな動画生成大規模モデルで、ユーザーのリアルタイム入力によるインタラクティブな動画効果の生成をサポートし、精確な視点制御を提供します。

Matrix-Zeroの主な特徴

3Dシーン生成大規模モデル：

• 入力変換：ユーザーが入力した画像を、自由に探索できるリアルで合理的な3Dシーンに変換します。

• 全体の一貫性：生成された3Dシーンは360度周囲を見回しても一貫性を保ち、前後の矛盾は発生しません。

• 自由な探索：シーン内であらゆる方向に長距離・大範囲の探索をサポートします。

• スタイル転移：異なるスタイルの画像入力をサポートし、異なるスタイルの3Dシーンを生成できます。

• 動的シーン生成：光源効果、水しぶきの動き、雲や霧の動きなどの物理効果の生成をサポートします。

インタラクティブ動画生成大規模モデル：

• ユーザー入力駆動：ユーザー入力を中核的な駆動力として、インタラクティブな空間知能動画を生成します。

• 精確な制御：より精確に制御できるaction modelを備え、ユーザーがキーボードやマウスで視点や動作を制御することをサポートします。

• スムーズな体験：スライディングウィンドウ機構により制御体験を最適化し、入力遅延を低減してインタラクションの流畅性を向上させます。

• 多様な入力処理：離散動作制御モジュール、連続視点制御モジュール、3Dシーン位置追跡モジュールを含み、さまざまなタイプのユーザー入力を処理します。

Matrix-Zeroの応用シナリオ

• 3Dゲーム開発：制御可能で迅速な3Dシーンモデリングを提供し、ゲーム開発の効率を向上させます。

• 映画・映像制作：映画やショートドラマのシーンやショットの生成をサポートし、より多くの創作の可能性を提供します。

• エンボディド・インテリジェンス（身体性を備えたAI）：シミュレーションシーンを迅速に構築し、エンボディド・インテリジェンスの訓練と応用の効率を向上させます。

• 仮想環境とインタラクティブアプリケーション：没入感のある体験を提供し、仮想環境やインタラクティブアプリケーションでの応用シナリオを拡大します。

• aiマルチマトリック製品：同社のAIゲーム制作、AIショートドラマ制作・編集などのビジネスを強化し、生産性を向上させます。

空間知能はAIにおける次のマイルストーンです。では、空間知能とは何でしょうか？AIの教母と呼ばれる李飛飛氏によれば、空間知能とは単にAIに世界を見させるだけでなく、AIに三次元世界を理解させ、それと対話する能力を持たせ、最終的に現実世界との深いインタラクションを実現することにあります。

Matrix-Zeroは2025年4月に上线予定で、まず崑崙万維のAIゲーム制作やAIショートドラマ制作などのビジネスラインに適用される予定です。