Duix: SDK für digitale Menschen auf Silizium-Basis 126

硅基智能hat DUIX als Open Source veröffentlicht, ein 2D fotorealistisches KI-GC Echtzeit-Rendering-Digital-Avatar-Modell! DUIX (Dialogue User Interface System) ist die von 硅基智能 entwickelte KI-Digital-Avatar-Intelligente-Interaktionsplattform. Durch die Open-Source-Bereitstellung der Interaktionsfähigkeiten des Digital Avatars können Entwickler verschiedene große Modelle, Spracherkennung (ASR) und Sprachsynthese (TTS) selbst einbinden, um Echtzeit-Interaktionen mit dem Digital Avatar zu realisieren und diesen mit nur einem Klick auf mehreren Endgeräten wie Android und iOS bereitzustellen. So kann jeder Entwickler mühelos intelligente, personalisierte Digital-Avatar-Agenten erstellen und in verschiedenen Branchen einsetzen.

Entwickler können verschiedene große Modelle, Spracherkennung (ASR) und Sprachsynthese (TTS) selbst einbinden, um Echtzeit-Interaktionen mit dem Digital Avatar zu realisieren.

Mit nur einem Klick auf mehreren Android- und iOS-Endgeräten einsetzbar; DUIX stellt außerdem 14 Digital-Avatar-Vorlagen zur Verfügung.

Unterstützt eine schnelle und kostengünstige Bereitstellung auf iOS, Android oder Großbildschirmen und läuft auch auf Tablets und Fahrzeugsystemen flüssig.

Unterstützt flüssige Bilder mit 50 Bildern/Sekunde, die Videogenerierungseffizienz übersteigt 1:0,5 und erfüllt somit Szenarien mit hohen Echtzeitanforderungen wie z. B. Live-Streaming.

Kann Bewegungen, Sprech-Mundbewegungen und Mikromimik präzise simulieren.

DUIX-Anwendungsszenarien:

Niedrige Bereitstellungskosten: Es ist kein Technikteam des Kunden erforderlich; unterstützt eine schnelle und kostengünstige Bereitstellung auf verschiedenen Endgeräten und Großbildschirmen.

Geringe Netzwerkabhängigkeit: Geeignet für virtuelle Assistenz- und Self-Service-Szenarien wie U-Bahn, Banken und Behörden.

Vielfältige Funktionen: Kann entsprechend den Kundenanforderungen die vielfältigen Bedürfnisse mehrerer Branchen wie Video, Medien, Kundenservice, Finanzen und Rundfunk erfüllen.

DUIX-Kernfunktionen:

Niedrige Bereitstellungskosten: Es ist kein Technikteam des Kunden erforderlich; unterstützt eine schnelle und kostengünstige Bereitstellung auf verschiedenen Endgeräten und Großbildschirmen.

Geringe Netzwerkabhängigkeit: Geeignet für virtuelle Assistenz- und Self-Service-Szenarien wie U-Bahn, Banken und Behörden.

Vielfältige Funktionen: Kann entsprechend den Kundenanforderungen die vielfältigen Bedürfnisse mehrerer Branchen wie Video, Medien, Kundenservice, Finanzen und Rundfunk erfüllen.

Echtzeit-Videokommunikation: Benutzer können in Echtzeit mit dem Digital Avatar sprechen.

Personalisierte Anpassung: Benutzer können je nach persönlichen Vorlieben Aussehen und Stimme auswählen und so ein einzigartiges Interaktionserlebnis schaffen.

Mehrere Rollen: Der Digital Avatar kann als Begleiter, Partner oder „Enzyklopädie" auftreten und Bedürfnisse erfüllen.

Emotionale Verbindung: Durch Interaktion bauen Benutzer eine emotionale Bindung zum Digital Avatar auf und genießen die Freude der Begleitung.

Momente: Die „Momente" des Digital Avatars zeigen sein virtuelles Leben; Benutzer können seine Persönlichkeit und Interessen besser kennenlernen.

Häufig gestellte Fragen zu DUIX:

1. Ist eine individuelle Anpassung des Digital Avatars möglich? Basierend auf Fotos oder Videos?

Antwort: Eine individuelle Anpassung des Digital Avatars wird unterstützt. Wir basieren auf Videos für die Anpassung des Digital Avatars. Sie können einen exklusiven Digital Avatar für die Verwendung im SDK anpassen lassen. Bei individuell angepassten Digital Avataren handelt es sich jedoch um einen kostenpflichtigen Service. Sie können sich per E-Mail an den Kundenservice wenden.

2. Wie wird das Erscheinungsbild angepasst?

Antwort: Für die Anpassung des 硅基-Digital-Avatars muss ein 3–5 Minuten langes Video mit einer realen Person vor der Kamera aufgenommen werden, die in den Mund spricht. Die spezifische Pose und der gesprochene Inhalt können je nach tatsächlichem Einsatzszenario festgelegt werden. Soll das Video beispielsweise für Rechtsberatung verwendet werden, kann die Person in formeller Kleidung vor der Kamera stehen und rechtliche Inhalte sprechen, sodass das Gesamtszenario konsistent wirkt.

3. Wie wird die Anpassung des Erscheinungsbilds berechnet?

Antwort: Wir bieten die Anpassung von Digital Avataren passend zur Open-Source-SDK-Schnittstelle an. Der Anpassungspreis beträgt 9.800 Yuan pro Set, einschließlich Erscheinungsbild und Stimme. Bei weiteren Anpassungswünschen können Sie sich per E-Mail an den Kundenservice wenden.

4. Wie wird das Erscheinungsbild des Digital Avatars aktualisiert?

Antwort: Die aktuelle Open-Source-Version stellt hauptsächlich öffentliche Modelle bereit; bei Bedarf kann eine Anpassung vorgenommen werden.

5. Gibt es eine API-Schnittstelle für das Klonen des Erscheinungsbilds?

Antwort: Der Trainingsservice unterstützt derzeit nur die Nutzung durch Bereitstellung auf unseren internen Servern.

6. Unterstützt die abgespielte wav-Datei Streaming-Daten?

Antwort: Das Streaming-Antriebssystem wird gerade umgebaut und optimiert und wird vorübergehend noch nicht unterstützt;

7. Gibt es zugehörige Callback-Methoden für den Beginn und das Ende der Wiedergabe?

Antwort: Die Callback-Methoden für den Beginn und das Ende der Wiedergabe finden Sie in der SDK-Dokumentation.

8. Gibt es zugehörige APIs zur Steuerung der Digital-Avatar-Bewegungen?

Antwort: Die API für Digital-Avatar-Bewegungen wird vorübergehend noch nicht unterstützt.

DUIX kommerzielle Fallbeispiele:

https://apps.apple.com/us/app/duix-your-ai-companion/id6451088879