Duix: SDK de humano digital basado en silicio

Duix: SDK de humano digital basado en silicio 132

Plataforma de interacción inteligente con humanos digitales basada en IA de Silicon Intelligence. Al abrir las capacidades de interacción, los desarrolladores pueden integrar diversos modelos grandes, reconocimiento (ASR) y síntesis de voz (TTS) para interacción en tiempo real.

#Ai工具箱 #Ai开源项目

Duix: SDK de humano digital basado en silicioIntroducción

硅基智能开源了DUIX (Silicon Intelligence) ha hecho de código abierto DUIX, que es un modelo de humano digital en tiempo real, de nivel humano real 2D, aiGC 数字人 (humano digital) con renderizado en tiempo real!DUIX(Dialogue User Interface System)es una plataforma de interacción inteligente de humanos digitales con IA creada por Silicon Intelligence. Al abrir el código fuente de las capacidades de interacción del humano digital, los desarrolladores pueden integrar por sí mismos múltiples modelos grandes, capacidades de reconocimiento de voz (ASR) y síntesis de voz (TTS), para lograr la interacción en tiempo real del humano digital e implementarlo con un solo clic en múltiples terminales Android e iOS, lo que permite a cada desarrollador crear fácilmente agentes de humanos digitales inteligentes y personalizados, y aplicarlos en diversas industrias.

Duix:硅基数字人SDK.jpg

Los desarrolladores pueden integrar por sí mismos múltiples modelos grandes, capacidades de reconocimiento de voz (ASR) y síntesis de voz (TTS) para lograr la interacción en tiempo real del humano digital.

Se puede implementar con un solo clic en múltiples terminales Android e iOS. DUIX también ofrece 14 plantillas que se pueden implementar con un solo clic.

Admite una implementación rápida y de bajo coste en iOS, Android o pantallas grandes, y funciona sin problemas en tabletas y sistemas de a bordo de vehículos.

Admite una imagen fluida de 50 fotogramas/segundo, con una eficiencia de generación de 视频 (vídeo) superior a 1:0.5, satisfaciendo lo cual cumple escenarios con altos requisitos de tiempo real como la transmisión en directo.

Puede simular con precisión los movimientos, los labios al hablar y las microexpresiones.

Escenarios de aplicación de DUIX:

Bajo coste de implementación: no es necesario que el cliente proporcione un equipo técnico para cooperar, y admite una implementación rápida y de bajo coste en múltiples terminales y pantallas grandes.

Baja dependencia de la red: adecuado para servicios de autoservicio de asistentes virtuales en diversos escenarios como metro, bancos y administración pública.

Funciones diversificadas: puede satisfacer las necesidades diversificadas de múltiples industrias como vídeo, medios, atención al cliente, finanzas y radiodifusión según los requisitos del cliente.

Funciones principales de DUIX:

Bajo coste de implementación: no es necesario que el cliente proporcione un equipo técnico para cooperar, y admite una implementación rápida y de bajo coste en múltiples terminales y pantallas grandes.

Baja dependencia de la red: adecuado para servicios de autoservicio de asistentes virtuales en diversos escenarios como metro, bancos y administración pública.

Funciones diversificadas: puede satisfacer las necesidades diversificadas de múltiples industrias como vídeo, medios, atención al cliente, finanzas y radiodifusión según los requisitos del cliente.

Interacción por vídeo en tiempo real: los usuarios pueden mantener conversaciones en tiempo real con humanos digitales.

Personalización a medida: los usuarios pueden elegir su apariencia y voz favoritas según sus intereses personales, creando una experiencia de interacción única.

Juego de roles múltiple: el humano digital puede convertirse en tu compañero, amante o una "enciclopedia", satisfaciendo tus necesidades.

Vínculo emocional: a través de la interacción, los usuarios establecen lazos emocionales con el humano digital y disfrutan de la alegría del acompañamiento.

Momentos: los "momentos" del humano digital muestran su vida virtual, lo que permite a los usuarios conocer más profundamente su personalidad e intereses.

Preguntas frecuentes sobre DUIX:

1. ¿Se admite la personalización de humanos digitales? ¿Se basa en fotos o en vídeos?

Respuesta: Sí, admitimos la personalización de humanos digitales, y nos basamos en vídeo para la personalización. Puede personalizar un humano digital exclusivo para usarlo en el SDK. Sin embargo, el humano digital personalizado es un servicio de pago; puede contactar con el correo electrónico de atención al cliente.

2. ¿Cómo personalizar la imagen?

Respuesta: Para personalizar un humano digital de Silicon Intelligence, es necesario filmar un vídeo de 3 a 5 minutos en el que una persona real aparezca y hable a cámara. La postura ante la cámara y el contenido del discurso pueden determinarse según el escenario real de uso final. Por ejemplo, si se utiliza para producir vídeos relacionados con asesoramiento legal, se puede elegir aparecer con vestimenta formal y hablar sobre temas legales, de modo que la situación general sea coherente.

3. ¿Cómo se cobra la personalización de la imagen?

Respuesta: Ofrecemos la personalización de humanos digitales que se adapta a la interfaz de código abierto del SDK. El precio de personalización es de 9.800 yuanes por conjunto, incluyendo imagen y voz. Si tiene más necesidades de personalización, puede contactar con el correo electrónico de atención al cliente.

4. ¿Cómo se actualiza la imagen del humano digital?

Respuesta: Actualmente, la versión de código abierto proporciona principalmente modelos públicos; si tiene necesidades, puede personalizarlos.

5. ¿Existe una interfaz API para la clonación de imágenes?

Respuesta: El servicio de entrenamiento actualmente solo admite la implementación en nuestros servidores internos para ser invocado.

6. ¿El archivo wav de transmisión admite datos en streaming?

Respuesta: La transmisión en streaming se está reformando y optimizando, y por el momento no es compatible;

7. ¿Existen métodos de devolución de llamada relacionados con el inicio y el final de la transmisión?

Respuesta: Para los métodos de devolución de llamada del inicio y fin de la transmisión, consulte la documentación del SDK.

8. ¿Existen API relacionadas para controlar los movimientos del humano digital?

Respuesta: Por el momento, la API de movimientos del humano digital aún no es compatible.

展示商业案例展示de DUIX:

https://apps.apple.com/us/app/duix-your-ai-companion/id6451088879

商业案例展示.jpg

Herramientas relacionadas con Duix: SDK de humano digital basado en silicio