SkyReels-V1：中国初、AI短編ドラマ制作向け動画生成モデル 119

昆仑万維SkyReels-V1は、中国初となるai短編ドラマ制作向けの動画生成モデルであり、映画・テレビ級の人物の微表情による演技生成を実現し、33種類の繊細な人物表情と400種類以上の自然な動作の組み合わせをサポートし、実在人物の感情表現を高度に再現します。

SkyReels-V1の主な特徴

• 映画・テレビ級の人物微表情演繹：33種類の繊細な人物表情と400種類以上の自然な動作の組み合わせをサポートし、実在人物の感情表現を高度に再現します。

• 映画級の光と影の演出：ハリウッドレベルの高品質な映像データに基づいて訓練されており、生成される各フレームの画面は、構図、俳優の立ち位置、カメラアングルなどの点において映画級の質感を備えています。

• 動画生成モードが多様：オープンソースの動画生成モデルの中で最大のパラメータ規模を誇り、画像から動画生成もサポートしており、同等の解像度において各指標はオープンソース分野での先進的水準に達しています。

• 人物動画理解能力が高い：人物を中心とした動画理解のマルチモーダル大規模モデルとして、動画内の人物関連コンテンツに対する理解能力を向上させることができ、映像化された表情認識、人物の空間位置認識、行動意図理解、演技シーン理解などの側面をカバーしています。

• 推論効率が極めて高い：自社開発の推論最適化フレームワーク「SkyReels-Infer」の助力により、推論効率が大幅に向上します。544p解像度において、単一の4090グラフィックボードでの推論がわずか80秒で完了し、分散型のマルチGPU並列処理もサポートしています。

SkyReels-V1の応用シーン：

• AI短編ドラマ制作：高い演技のディテールと映画級の質感を持つ短編ドラマコンテンツを生成し、従来の短編ドラマ制作における工程の煩雑さ、高コスト、長期間という問題を効果的に解決します。

• ソーシャルメディアコンテンツ制作：高品質な短編ドラマコンテンツを迅速に生成し、コンテンツの魅力性を高めます。

• ブランド広告制作：ブランドイメージに合致したクリエイティブな短編ドラマコンテンツを迅速に生成し、制作時間とコストを削減します。

• 教育とトレーニング：教育動画を生成し、コース内容を生生きとした方法で表示します。

• エンターテインメントとバーチャルキャラクター：バーチャルアイドルやゲームのカットシーンを作成したり、ライブ配信プラットフォームにバーチャル配信者向けコンテンツを提供したりします。
  

SkyReels-V1の使用方法

• オープンソースアドレスへのアクセス：SkyReels-V1のオープンソースアドレス：https://github.com/SkyworkAI/SkyReels-V1 にアクセスできます。

• ダウンロードとインストール：オープンソースライセンスに従って、SkyReels-V1とその依存関係をダウンロードしてインストールします。

• データ準備：自社開発の高品質データクリーニングと人手によるアノテーションパイプラインを活用し、千万規模の高品質な映画、テレビドラマ、ドキュメンタリーデータセットを構築します。

• モデル訓練と微調整：自社開発の「Human-Centric」動画理解マルチモーダル大規模モデルに基づき、SkyReels-V1の訓練と微調整を行い、人物演技やシーン理解などの能力を向上させます。

• 動画生成：訓練済みモデルを使用して動画を生成し、テキストから動画生成と画像から動画生成の2つのモードをサポートします。

• 最適化とデプロイ：自社開発の推論最適化フレームワーク「SkyReels-Infer」を利用してモデルの最適化とデプロイを行い、推論効率を向上させ、リソース消費を削減します。

関連リンク：

Github：https://github.com/SkyworkAI/SkyReels-V1

技術レポート：https://skyworkai.github.io/skyreels-a1.github.io/report.pdf