Tencent Hunyuan3D-2が発表した5つのオープンソース3Dモデル、それぞれの特徴は？ 208

Hunyuan3D-2とは？

Hunyuan3D 2は、Tencentが発表した先進的な大規模3Dアセット生成システムであり、テキストまたは画像から高解像度でテクスチャ付きの3Dモデルを生成することができます。

Hunyuan3D-2のコア機能

• 二段階生成プロセス：最初にジオメトリモデルを作成し、その後そのジオメトリモデルに対してテクスチャマップを合成するという二段階生成方式を採用しています。この方式により、形状生成とテクスチャ生成の課題を効果的に分離しつつ、生成されたジオメトリモデルや手作業で作成されたジオメトリモデルに対して柔軟にテクスチャ処理を行うことが可能になります。

• 高品質な生成：リアルな3Dモデルを作成することができ、生成されるテクスチャやジオメトリのディテール品質が高く、既存のオープンソースモデルやクローズドソースモデルを超えています。

• 多様な出力：物体、キャラクター、環境など、さまざまな種類の3Dアセットを生成できます。

• 高速生成：パフォーマンスが最適化されており、モデルを迅速に生成して作業効率を向上させます。

Hunyuan3D-2オープンソースモデルの特徴

コアモデル

Hunyuan3D-DiT-v2-0

• 高忠実度ジオメトリ生成：フローベースの拡散モデルに基づき、与えられた画像プロンプトから高忠実度かつ高解像度のテクスチャなしのジオメトリモデルを生成します。

• 正確なアライメント：生成されたジオメトリモデルは入力画像と正確に一致し、下流のアプリケーションにとって堅実な基盤を提供します。

• ハイブリッドネットワーク構造：デュアルストリームとシングルストリームのハイブリッドネットワーク構造を採用し、生成効果を向上させています。

• パラメータ数：モデルパラメータ数は26億です。

Hunyuan3D-Paint-v2-0

• 高解像度テクスチャ合成：生成されたジオメトリモデルや手作業で作成されたメッシュに対して、高解像度でリアルかつ vivid（生き生きとした）なテクスチャマップを生成できます。

• マルチビュー拡散技術：ジオメトリ条件（法線マップやポジションマップなど）と組み合わせてマルチビュー画像を生成し、高解像度テクスチャにベイクします。

• パラメータ数：モデルパラメータ数は13億です。

Hunyuan3D-Delight-v2-0

• 画像からの照明除去：入力画像から照明効果を除去し、照明に影響されないテクスチャマップを生成します。

• テクスチャ品質の向上：照明を除去することで、より高品質なテクスチャを生成でき、テクスチャ生成の前処理に適しています。

• パラメータ数：モデルパラメータ数は13億です。

拡張モデル

Hunyuan3D-DiT-v2-0-Fast

• 高速バージョン：指導蒸留技術により推論時間を半分に短縮し、生成速度により高い要求が求められる場面に適しています。

• 効率的な生成：生成品質を維持しつつ、生成速度を大幅に向上させています。

Hunyuan3D-2mv

• マルチビュー形状生成：マルチビュー入力による高品質な3Dジオメトリ形状の生成に特化しています。

• 複雑なシーンへの適用：複数の角度からシーンやオブジェクトを理解する必要がある3D制作に適しています。

Hunyuan3D-2mini

• 軽量バージョン：コア機能を維持しつつ、モデルのサイズと計算効率を最適化しています。

• 軽量アプリケーション向け：モバイル端末や軽量デバイスなど、リソースに制限のあるシナリオにより適しています。

Hunyuan3D-2の応用

• ゲーム開発：キャラクター、アイテム、シーンなど、高品質な3Dゲームアセットを迅速に生成できます。

• UGCソーシャルとコンテンツ制作：ユーザーによるコンテンツ生成をサポートし、ユーザーはテキストの説明、画像、スケッチから個別の3Dモデルを迅速に生成できます。

• Eコマースと広告：商品画像から高精度な3D商品モデルを迅速に生成し、オンライン表示やインタラクションに活用できます。

• 工業製造とデザイン：設計スケッチやコンセプト図から3D工業製品プロトタイプを迅速に生成し、さまざまなフォーマットに対応して3Dプリンティングツールとシームレスに連携できます。

• 教育と研究：オープンソースのモデルとコードを提供し、教育者や研究者が教育や研究に利用しやすくなっています。

Hunyuan3D-2の推論コード、モデルのチェックポイント、技術レポートなどはいずれもオープンソースとして公開されています。

プロジェクト公式サイト： https://3d-models.hunyuan.tencent.com

Githubリポジトリ： https://github.com/Tencent/Hunyuan3D-2

HuggingFaceモデルライブラリ： https://huggingface.co/tencent/Hunyuan3D-2