Magic Animate_云技派,专注ai人工智能! 122

Magic Animateは、アニメーション制作を簡素化する画期的なオープンソースプロジェクトであり、単一の画像と動的な動画からアニメーションビデオを作成することができます。簡単に言えば、1枚のリファレンス画像とポーズシーケンス（動画）を与えると、ポーズの動作に追従し、リファレンス画像のアイデンティティ特徴を保持したアニメーションビデオを生成できます。シンガポール国立大学のShow LabとByteDanceによって開発されました。

Magic Animateは、すべてのダンス動画ソリューションにおいて最高の一貫性を提供しますが、面部と手部に歪みが発生する可能性があります。デフォルト設定では、アニメからリアルまでスタイルが移行する場合があり、特に動画内の顔に影響します。デフォルトのDensePose駆動動画にアニメスタイルを適用すると、体型にも影響します。

Magic Animate公式サイト：www.magicanimate.org

MagicAnimateのコア機能：

• 単一の画像と動的動画からアニメーションを作成

• 時間的一貫性の保持

• リファレンス画像の保持

• アニメーションの忠実度の向上

• DALLE3などのT2I拡散モデルとの統合

• IDをまたいだアニメーションと未知の領域からのアニメーション

• テキストプロンプトによる画像アニメーション

• ダンス動画ソリューションにおける高水準の一貫性の維持

MagicAnimateの使用方法：

Magic Animateを使用するには、StableDiffusion V1.5とMSEファインチューニング済みVAEの事前学習済みベースモデルをダウンロードする必要があります。その後、必要な依存関係をインストールし、conda環境をアクティブにします。次に、静的な人物写真を1枚アップロードし、生成したい動作のデモ動画をアップロードし、パラメータを調整します。その後、HuggingfaceまたはReplicateでオンラインデモを試すことができます。また、Replicate APIを使用してプログラミングによりアニメーションビデオを生成することも可能です。