Duix: 실리콘 기반 디지털 휴먼 SDK 127

실리콘 지능이 만든 AI 디지털 휴먼 스마트 인터랙션 플랫폼으로, 디지털 휴먼 인터랙션 기능을 오픈소스로 제공하여 개발자가 다양한 대형 모델, 음성 인식(ASR), 음성 합성(TTS) 기능을 직접 연동해 실시간 인터랙션을 구현할 수 있습니다.

#Ai工具箱 #Ai开源项目

방문 Duix: 실리콘 기반 디지털 휴먼 SDK

Duix: 실리콘 기반 디지털 휴먼 SDK소개

실리콘베이스 지능이 DUIX를 오픈소스로 공개했습니다. DUIX는 2D 실사급, AIGC 실시간 렌더링 디지털 휴먼 모델입니다! DUIX(Dialogue User Interface System)는 실리콘베이스 지능이 만든 AI 디지털 휴먼 지능형 상호작용 플랫폼입니다. 디지털 휴먼 상호작용 능력을 오픈소스로 공개함으로써, 개발자는 여러 대모델, 음성 인식(ASR), 음성 합성(TTS) 기능을 직접 연동하여 디지털 휴먼과의 실시간 상호작용을 구현할 수 있으며, Android와 iOS 등 다양한 단말에서 원클릭 배포가 가능합니다. 이를 통해 모든 개발자가 지능적이고 개인화된 디지털 휴먼 Agent를 손쉽게 제작하여 다양한 산업 분야에 적용할 수 있습니다.

Duix：실리콘 디지털 휴먼 SDK.jpg

개발자는 여러 대모델, 음성 인식(ASR), 음성 합성(TTS) 기능을 직접 연동하여 디지털 휴먼과의 실시간 상호작용을 구현할 수 있습니다.

Android 및 iOS 등 다양한 단말에서 원클릭 배포가 가능하며, DUIX는 14개의 디지털 휴먼 템플릿도 제공합니다.

저비용으로 iOS, 안드로이드 또는 대형 디스플레이에 신속하게 배포할 수 있으며, 태블릿, 차량 탑재 시스템에서도 원활하게 작동합니다.

초당 50프레임의 부드러운 화면을 지원하며, 영상 생성 효율은 1:0.5를 초과하여 라이브 방송 등 실시간성이 매우 중요한 일부 시나리오를 충족합니다.

동작, 말하는 입술 모양, 미세 표정까지 정밀하게 모사할 수 있습니다.

DUIX 적용 시나리오:

낮은 배포 비용: 고객이 기술팀의 협조를 제공할 필요가 없으며, 다양한 단말 및 대형 디스플레이에 저비용으로 신속하게 배포할 수 있습니다.

낮은 네트워크 의존도: 지하철, 은행,政务 등 다양한 시나리오의 가상 어시스턴트 셀프 서비스에 적합합니다.

다양한 기능: 고객 요구에 따라 영상, 미디어, 고객 서비스, 금융, 방송 등 여러 산업 분야의 다양한 요구를 충족할 수 있습니다.

DUIX 핵심 기능:

낮은 배포 비용: 고객이 기술팀의 협조를 제공할 필요가 없으며, 다양한 단말 및 대형 디스플레이에 저비용으로 신속하게 배포할 수 있습니다.

낮은 네트워크 의존도: 지하철, 은행,政务 등 다양한 시나리오의 가상 어시스턴트 셀프 서비스에 적합합니다.

다양한 기능: 고객 요구에 따라 영상, 미디어, 고객 서비스, 금융, 방송 등 여러 산업 분야의 다양한 요구를 충족할 수 있습니다.

실시간 영상 소통: 사용자는 디지털 휴먼과 실시간으로 대화할 수 있습니다.

개인 맞춤 설정: 사용자는 개인의 취향에 따라自己喜欢的 외관과 음성을 선택하여 독특한 상호작용 경험을 만들 수 있습니다.

다중 역할扮演: 디지털 휴먼은 사용자의伴侶, 애인 또는 "백과사전"이 되어 다양한 needs를 충족할 수 있습니다.

정서적 연결: 상호작용을 통해 사용자와 디지털 휴먼은 정서적 유대를 형성하며, 동반의 즐거움을 즐길 수 있습니다.

모먼트: 디지털 휴먼의 "모먼트"는 그들의 가상 생활을 보여주며, 사용자는 그들의 개성과 관심사를 더 깊이 이해할 수 있습니다.

DUIX 자주 묻는 질문:

1. 디지털 휴먼 맞춤 제작을 지원하나요? 사진 기반인가요, 영상 기반인가요?

답: 디지털 휴먼 맞춤 제작을 지원하며, 저희는 영상을 기반으로 디지털 휴먼을 맞춤 제작합니다. SDK에서 사용할 전용 디지털 휴먼을 맞춤 제작하실 수 있습니다. 다만 맞춤 제작된 디지털 휴먼은 유료 서비스이므로, 고객 서비스 이메일로 문의하실 수 있습니다.

2. 어떻게 이미지를 맞춤 제작하나요?

답: 실리콘베이스 디지털 휴먼을 맞춤 제작하려면 3~5분 길이의 실제 사람이 나와서 말하는 영상을 촬영해야 하며, 구체적인 포즈와 내용은 최종 실제 사용 시나리오에 따라 결정할 수 있습니다. 예를 들어 법률 상담 관련 영상 제작에 사용할 경우, 정장을 입고 법률 관련 내용을 말하도록 촬영하면 전체적인 상황이 일관성 있게 어울립니다.

3. 이미지 맞춤 제작 요금은 어떻게 되나요?

답: 저희는 SDK 오픈소스 인터페이스에 맞는 디지털 휴먼 맞춤 제작을 제공하며, 맞춤 제작 가격은 1세트당 9,800元이며, 이미지와 음성이 포함됩니다. 추가 맞춤 제작 요구사항이 있으시면 고객 서비스 이메일로 문의하실 수 있습니다.

4. 디지털 휴먼 이미지는 어떻게 업데이트하나요?

답: 현재 오픈소스로 제공되는 것은 주로 공용 모델이며, 별도 요구사항이 있을 경우 맞춤 제작이 가능합니다.

5. 이미지 클로닝에 API 인터페이스가 있나요?

답: 훈련 서비스는 현재 당사 내부 서버에 배포하여 호출하는 방식만 지원합니다.

6. 재생되는 wav 파일은 스트리밍 데이터를 지원하나요?

답: 스트리밍 구동은 현재 리팩토링 최적화 중에 있으며, 당분간 지원하지 않습니다.

7. 재생 시작과 종료에 관련 콜백 메서드가 있나요?

답: 재생 시작 및 종료 콜백 메서드에 대한 자세한 내용은 SDK 문서를 참조하십시오.

8. 디지털 휴먼 동작을 제어하는 관련 API가 있나요?

답: 디지털 휴먼 동작 API는 현재 지원되지 않습니다.