MIMO：静止画や動画から操作可能なアニメーションキャラクターを高速生成 224

アリババMIMO技術は、アリババグループのスマートコンピューティング研究所によって発表され、静止画や動画から操作可能なアニメーションキャラクターを迅速に生成することができ、3Dキャラクター生成の制作ハードルを大幅に下げました。従来の3Dキャラクター生成方法とは異なり、MIMOは動作や表現の一貫性を保ちながら、実写や2Dアニメの人物を問わず、動画内のキャラクターを置き換えることができます。

MIMOの中核的な利点は、その利便性と効率性にあります。多様なアプリケーションシーンに対応しています。

アリババMIMOの応用：

• バーチャルヒューマンアニメーション：ユーザーは簡単な指示で静止画を動的なキャラクターに変換でき、さまざまなシーンに適用できます。

• 映画 special effects（特殊効果）：MIMOは現実世界の動画から複雑な動作を抽出し、バーチャルキャラクターに適用することで、生成されたキャラクターが現実のシーン内の物体と自然にインタラクションすることを可能にします。オクルージョン（遮蔽）や被写界深度の処理により、アニメーション効果がよりリアルになります。

• ゲームキャラクター設計：ゲーム開発者はMIMOを利用して多様なゲームキャラクターを迅速に作成でき、開発効率を向上させます。アニメーション制作の難易度を低減します。

アリババMIMOの使用方法：

• 素材を提供：ユーザーは参照素材として、静止画1枚または動画1本を提供するだけです。

• 指示を入力：簡単な動作指示により、キャラクターの動きや動作を指定できます。

• アニメーションを生成：システムが入力された素材と指示を迅速に操作可能なバーチャルキャラクターに変換します。実写キャラクターでもカート風でも擬人化キャラクターでも、簡単に実現できます。

• 自由な組み合わせ：ユーザーはキャラクター画像、動作シーケンス、シーンビデオなど異なる要素を自由に組み合わせることで、多様なアニメーション効果を実現できます。

アリババMIMOの優位性：

• 高効率で便利：従来の3Dキャラクター生成方法と比較して、MIMOは多角度撮影や個別学習を必要とせず、効率を大幅に向上させます。

• 広範な応用：バーチャルヒューマンアニメーション、映画特殊効果、ゲームキャラクター設計など、複数の分野に適しています。

• リアルなインタラクション：生成されたキャラクターは現実のシーン内の物体と自然にインタラクションでき、オクルージョンや被写界深度を処理してリアルなアニメーション効果を提供します。

さらに、MIMOは現実世界の動画から複雑な動作を抽出し、バーチャルキャラクターに適用することをサポートしており、アニメーション効果を一層リアルにします。ユーザーはキャラクター画像、動作シーケンス、シーンビデオなど異なる要素を自由に組み合わせることで、多様なアニメーション効果を実現でき、創作効率を向上させます。

アリババMIMOプロジェクトアドレス：https://menyifang.github.io/projects/MIMO/index.html