Duix:シリコン基板上ディジタルヒューマンSDK

Duix:シリコン基板上ディジタルヒューマンSDK 133

シリコン智能が構築したAIディジタルヒューマン対話プラットフォーム。ディジタルヒューマン対話機能をオープンソース化しており、開発者は各種大規模モデル、音声認識(ASR)、音声合成(TTS)を自由に接続し、リアルタイムのディジタルヒューマン対話を実現可能。

#Ai工具箱 #Ai开源项目

Duix:シリコン基板上ディジタルヒューマンSDK紹介

硅基智能はDUIXをオープンソース化しました。DUIXは2Dのリアル人間レベル、aiGCリアルタイムレンダリングデジタルヒューマンモデルです!DUIX(Dialogue User Interface System)は、硅基智能が構築したAIデジタルヒューマン知的インタラクションプラットフォームです。デジタルヒューマンのインタラクション能力をオープンソース化することで、開発者は複数の大規模モデル、音声認識(ASR)、音声合成(TTS)機能を自由に統合し、デジタルヒューマンのリアルタイムインタラクションを実現できます。また、AndroidやiOSを含む複数の端末にワンクリックで展開でき、すべての開発者がインテリジェントでパーソナライズされたデジタルヒューマンエージェントを簡単に作成し、様々な業界に適用することが可能になります。

Duix:硅基数字人SDK.jpg

開発者は複数の大規模モデル、音声認識(ASR)、音声合成(TTS)機能を自由に統合でき、デジタルヒューマンのリアルタイムインタラクションを実現できます

AndroidやiOSを含む複数の端末にワンクリックで展開可能で、DUIXはさらに14個のデジタルヒューマンテンプレートを提供しています

iOS、Android、大画面デバイスへの低コストで迅速な展開をサポートし、タブレットや車載システム上でもスムーズに動作します

50フレーム/秒のスムーズな映像をサポートし、動画生成効率は1:0.5を超え、ライブ配信など高いリアルタイム性を要求されるシーンにも対応します

動作、話す時の口の動き、微妙な表情を正確にシミュレートできます

DUIXの適用シーン:

低い展開コスト:客户提供の技術チームによる協力は不要で、複数の端末および大画面デバイスへの低コストで迅速な展開をサポートします。

ネットワーク依存が小さい:地下鉄、銀行、行政サービスなど、様々なシーンの仮想アシスタントによるセルフサービスに適しています。

多様な機能:顾客のニーズに応じて、動画、メディア、カスタマーサービス、金融、放送など、複数業界の多様なニーズに対応できます。

DUIXのコア機能:

低い展開コスト:客户提供の技術チームによる協力は不要で、複数の端末および大画面デバイスへの低コストで迅速な展開をサポートします。

ネットワーク依存が小さい:地下鉄、銀行、行政サービスなど、様々なシーンの仮想アシスタントによるセルフサービスに適しています。

多様な機能:顾客のニーズに応じて、動画、メディア、カスタマーサービス、金融、放送など、複数業界の多様なニーズに対応できます。

リアルタイム映像交流:ユーザーはデジタルヒューマンとリアルタイムで対話できます。

パーソナライズされたカスタマイズ:ユーザーは個人の興味に基づいて、好みの外観や声を選択し、独自のインタラクション体験を創造できます。

多様な役割扮演:デジタルヒューマンはあなたのパートナー、恋人、あるいは「百科事典」となり、ニーズを満たすことができます。

感情的なつながり:インタラクションを通じて、ユーザーとデジタルヒューマンの間に感情的な絆が築かれ、陪伴の乐趣を楽しむことができます。

モーメント:デジタルヒューマンの「モーメント」は彼らの仮想生活を紹介し、ユーザーはその個性と興味をより深く理解することができます。

DUIXのよくある質問:

1.デジタルヒューマンのカスタマイズはサポートされていますか?写真に基づいていますか、それとも映像に基づいていますか?

答:デジタルヒューマンのカスタマイズはサポートされており、当社では映像に基づいてデジタルヒューマンのカスタマイズを行っています。SDKで使用するための专属のデジタルヒューマンをカスタマイズできます。ただし、カスタマイズしたデジタルヒューマンは有料サービスとなりますので、カスタマーサポートのメールまでご連絡ください。

2.イメージのカスタマイズ方法は?

答:硅基デジタルヒューマンのカスタマイズには、3〜5分間の実際の人物が出演する口述映像を撮影する必要があります。具体的な出演ポーズや口述内容は、最終的な実際の使用シーンに応じて決定できます。例えば、法律相談関連の動画制作に使用する場合は、正装で出演し、法律関連の内容を口述するなど、全体的なシナリオを一貫性のあるものにすることをお勧めします。

3.イメージのカスタマイズの料金はどのように設定されていますか?

答:当方ではSDKのオープンソースインターフェースに対応したデジタルヒューマンのカスタマイズを提供しており、カスタマイズ価格は9800元/セットで、外観+音声が含まれます。さらに多くのカスタマイズニーズがある場合は、カスタマーサポートのメールまでご連絡ください。

4.デジタルヒューマンのイメージはどのように更新しますか?

答:現在、オープンソース版では主に公共モデルを提供しており、ニーズがある場合はカスタマイズが可能です

5.イメージのクローン化にAPI接口はありますか?

答:現時点では、トレーニングサービスは社内のサーバーでの呼び出しのみサポートしています

6.報知用のwavファイルはストリーミングデータをサポートしていますか?

答:ストリーミング駆動は現在も改善・最適化中のため、当面はサポートされていません。

7.報知の開始・終了に関連するコールバックメソッドはありますか?

答:報知の開始・終了のコールバックメソッドについては、SDKドキュメントの詳細をご参照ください

8.デジタルヒューマンの動作を制御するAPIはありますか?

答:デジタルヒューマンの動作APIは、当面サポートされていません

DUIXのビジネスケース紹介:

https://apps.apple.com/us/app/duix-your-ai-companion/id6451088879

商业案例展示.jpg

Duix:シリコン基板上ディジタルヒューマンSDK に関連するツール