TMEStudio: Tencent의 온라인 음악 제작 어시스턴트 145

TME Studio는 텐센트 음악 엔터테인먼트에서 출시한 온라인 음악 제작 어시스턴트로, 산하의 Galaxy 음향, MUSE, 천금 척금네 실험실, Tencent ai Lab가 공동으로 제작했으며, 음악 분리, MIR 계산, 작사 보조, 스마트 악보 등 창작 도구를 제공합니다. 음악 애호가를 지원하여 창작을 더 쉽게 만들어 줍니다.

TME Studio는 곡에서 보컬과 악기를 분리·추출하는 "음악 분리", 음악 콘텐츠 이해를 기반으로 다양한 곡 요소를 식별하는 "MIR 계산", 인공지능 추천 알고리즘을 기반으로 적절한 운율 단어를 추천하는 "작사 보조", AI가 대량의 곡에 대해 자동으로 기타 악보를 생성하여 반주 연습을 지원하는 "스마트 악보" 등 4가지 기능을 통합합니다.

TME Studio 핵심 기능:

1, 음악 분리

딥러닝 기술을 기반으로 임의의 곡을 업로드하여 분리합니다. 보컬 분리뿐만 아니라 음악 속 피아노 소리, 기타 소리, 베이스 소리, 드럼 소리, 기타 소리를 분리할 수 있으며, 각 소리는 개별 트랙으로 제공되어 개별 추출을 지원합니다.

2, MIR 계산

TME Studio는 인공지능과 신호 처리를 통해 음악의 콘텐츠를 이해·분석하여 음악의 샘플링 레이트, 비트 깊이, BPM, 리듬, 박자, 조성, 코드 진행, 드럼 비트 인식, 코러스 인식 등의 정보를 추출합니다. 더 깊은 차원의 인식 및 분석을 통해 음악이 담고 있는 더 높은 수준의 정보를 발굴하여 더 지능적인 음악 도구를 만들고, 기계가 사용자의 음악을 더 잘 이해하도록 합니다.

3, 작사 보조

텐센트 뮤지션·천금네 실험실에서 출시한 작사 도구로, TME 전체 곡 라이브러리의 가사 및 산문, 시 등 다양한 말뭉치 자료를 분석하여 중국어 단어 입력을 지원하며, 운율이 맞는 단어와意境(의경)와 관련된 단어를 찾을 수 있습니다. 단운, 쌍운, 다중운을 포함하여 영감의 공간을 열어줍니다.

4, 스마트 악보

TME Studio는 딥러닝 신경망 알고리즘을 기반으로 음악을 업로드하기만 하면 연주하고 싶은 곡을 연주할 수 있습니다. 음악에 대해 기타 악보, 우쿨렐레 악보, 피아노 악보를 스마트하게 생성하는 것을 지원하며, AB 반복, 메트로놈, 리듬, 배경음 설정도 지원합니다.

앞으로 TME Studio는 "공간 오디오 믹싱", "장르 롤링", "믹싱 콘솔", "보컬 합성" 등의 오디오 도구를 추가로 출시할 예정이며, AI와 결합하여 음악인에게 흥미로운 영감을 제공하고 음악인이 더 많은 양질의 음악 작품을 만드는 데 전력을 기울일 것입니다.

텐센트 음악 천금네 실험실은 QQ 음악, Quan민 K 노래, 텐센트 뮤지션, Kuwo, Kugou 등 제품의 멀티미디어 및 AI 응용 기술 연구 및落地를 담당합니다. 담당하는 스타 프로젝트에는 QQ 음악의 노래 인식, 허밍 인식, 커버 인식, 가사 타임스탬프, 프리미엄 음질, DMEE, MV 동영상 편집, 자막 인식, 스타 인식; Quan민 K 노래의 노래 채점, 스마트 음성 수정, 스마트 음향 효과, 보컬 합성; 게으른 사람畅听의 AI 낭독, AI 원고; 라이브 방송 상호작용의 스마트 감정, 하이라이트 인식, 단말-클라우드 통합 동영상 품질 향상이 포함됩니다. 동시에 메타버스 내의 가상 인물 기술도 탐구 중이며, 가상 이미지, 가상 댄스, 노래 표정 생성, 음악 조명쇼 등을 핵심으로 하는 소천 소청 남매 가상 인물이 곧 출시될 예정이니 많은 기대 바랍니다.