대본 기획 도우미▸ 
AI 앱 
AI 뉴스 
Krillin AI: 로컬에서 영상을 번역하고 더빙하며 음성을 복제하는 도구
Krillin AI: 로컬에서 영상을 번역하고 더빙하며 음성을 복제하는 도구소개
Krillin ai란 무엇인가요?
Krillin AI는 로컬에서 사용할 수 있는 동영상 번역, 더빙 및 음성 클로닝 도구로, 국내외 주요 동영상 플랫폼과 호환됩니다. OpenAI API 규격을 준수하는 대규모 모델을 지원하며, 기본적으로 CosyVoice 또는 사용자 지정 음성 클로닝을 지원합니다. 중국어, 영어, 일본어, 독일어 등 100개 이상의 언어를 지원하는 다양한 음성 번역 서비스를 제공합니다. Windows, Linux, Mac 버전을 지원하며, 원클릭 배포로 전체 워크플로우를 진행할 수 있고, Douyin(틱톡 중국판), Xiaohongshu(레드노트), Bilibili, WeChat Channels, TikTok, YouTube Shorts 등 다양한 플랫폼에 맞는 콘텐츠를 생성할 수 있습니다.
Krillin AI 주요 기능
원클릭 시작: 복잡한 설정 없이 의존성이 자동으로 설치되며, 데스크톱 버전이 새로 추가되어 더욱 편리하게 사용할 수 있습니다.
동영상 가져오기: yt-dlp를 통한 다운로드 또는 로컬 파일 업로드를 지원합니다.
정확한 인식: Whisper 기반의 고정확도 음성 인식을 제공합니다.
지능형 분할: LLM을 사용하여 자막을 분할하고 정렬합니다.
용어 교체: 전문 분야의 어휘를 원클릭으로 교체할 수 있습니다.
전문 번역: LLM 기반으로 문단 단위 번역이 이루어져 의미의连贯性을 유지합니다.
더빙 클로닝: CosyVoice 엄선 음색 또는 사용자 지정 음색 클로닝을 제공합니다.
동영상 합성: 가로/세로 동영상 및 자막 레이아웃을 자동으로 처리합니다.
대규모 모델 지원
OpenAI API 규격을 준수하는 모든 클라우드/로컬 대규모 모델 서비스와 호환됩니다:
OpenAI
DeepSeek
통의천문(Qwen)
로컬 배포된 오픈소스 모델
OpenAI 형식과 호환되는 기타 API 서비스
언어 지원
입력 언어 지원: 중국어, 영어, 일본어, 독일어, 튀르키예어, 한국어, 러시아어, 말레이어 (지속적으로 추가 중)
번역 언어 지원: 영어, 중국어, 러시아어, 스페인어, 프랑스어 등 101개 언어
Krillin AI 데스크톱 버전 설치 방법
1. 데스크톱 버전 파일 다운로드
Krillin AI의 GitHub 저장소(Krillin AI GitHub)에 접속합니다.
저장소의 "releases" 페이지에서 사용 중인 운영체제에 맞는 데스크톱 버전 실행 파일(파일명에 desktop이 포함된 버전)을 찾아 로컬로 다운로드합니다.
2. 빈 폴더 생성
컴퓨터에 빈 폴더를 하나 만들고, 다운로드한 데스크톱 버전 실행 파일을 해당 폴더에 넣습니다.
3. 소프트웨어 실행
Windows 사용자: 다운로드한 실행 파일을 더블 클릭하면 소프트웨어가 실행됩니다.
macOS 사용자: 데스크톱 버전의 서명 문제로 인해 앱을 수동으로 신뢰해 주어야 합니다.
터미널을 열고 실행 파일이 있는 디렉터리로 이동합니다.
다음 명령을 실행합니다(파일명이 KrillinAI_1.0.0_desktop_macOS_arm64이라고 가정):
sudo xattr -cr ./KrillinAI_1.0.0_desktop_macOS_arm64 sudo chmod +x ./KrillinAI_1.0.0_desktop_macOS_arm64 ./KrillinAI_1.0.0_desktop_macOS_arm64
이렇게 하면 소프트웨어가 실행됩니다.
4. 소프트웨어 구성
데스크톱 버전은 구성 과정을 간소화했지만, 소프트웨어 내에서 음성 인식 및 번역 서비스 제공자를 선택하고 해당 API 키(예: OpenAI API 키)를 입력하는 등의 기본 설정이 여전히 필요합니다.
더 고급 설정이 필요한 경우 공식 문서의 구성 관련 안내를 참조할 수 있습니다.
5. 사용 시작
설정이 완료되면 Krillin AI를 통해 자막 생성, 번역, 더빙 등의 기능을 사용하여 동영상을 처리할 수 있습니다.
Github: https://github.com/krillinai/KrillinAI
