ToonCrafter：カートゥーンアニメーションのトランジションフレームを自動生成 237

ToonCrafterは、カートゥーンアニメーションのトランジションフレームを自動生成し、参照画像に基づいてアニメーションスケッチに自動的に着色します。ToonCrafterは生成的補間手法により、カートゥーンアニメーションのフレーム間に自然で一貫した中間フレームを生成します。複雑な非線形モーションやオクルージョン問題にも対応でき、アニメーションのトランジションをよりスムーズかつ自然にします。また、参照画像に基づいてスケッチに着色する機能も備えています。

ユーザーが1枚または2枚の参照画像を提供するだけで、システムが参照画像の色とスタイルに基づいて、入力されたスケッチに着色処理を行います。

ToonCrafterはさまざまなアニメーションスタイルに対応しており、シンプルなラインアニメーションから複雑なカートゥーンシーンまで，轻松に処理できます。

ToonCrafterは、香港中文大学（CUHK）、香港城市大学（CityU）、そしてテンセント人工知能ラボが共同で開発したツールで、アニメーターがより効率的にカートゥーンアニメーションのトランジション効果を生成・最適化することを目的としています。このツールは、生成モデルと補間技術により、カートゥーンアニメーションにおけるフレーム間の不自然なトランジション問題を解決し、アニメーション制作の効率と品質を向上させます。

ToonCrafterの主な機能：

生成的カートゥーン補間：ToonCrafterは生成的補間手法を採用しており、カートゥーンアニメーションのフレーム間に自然で一貫した中間フレームを生成できます。この手法は複雑な非線形モーションやオクルージョン問題にも対応でき、アニメーションのトランジションをよりスムーズかつ自然にします。アニメーションスタイルがシンプルでも複雑でも、ToonCrafterは柔軟に対応します。

例えば、ランニングアニメーションの制作において、ToonCrafterがキャラクターの一歩一歩の中間フレームを生成し、走る動きを滑らかでリアルに見せる仕組みを説明しています。

スケッチ誘導補間：ToonCrafterは、ユーザーがスケッチによって補間プロセスをガイドすることもサポートしています。ユーザーはスパースなスケッチ入力を提供でき、システムはそのスケッチに基づいてユーザーの期待に沿った中間フレームを生成します。この方法により、ユーザーはアニメーションのトランジションを細かく制御でき、補間結果の正確性と個別性が向上します。

例えば、手を振るアニメーションの制作において、ユーザーは開始と終了の動きを描くだけで、ToonCrafterが中間の手を振るプロセスを生成します。

ToonCrafterプロジェクトURL：https://huggingface.co/spaces/Doubiiu/tooncrafter

ToonCrafter Github：https://github.com/ToonCrafter/ToonCrafter