Krillin AI:ローカルで動く動画翻訳・吹き替え・音声クローンツール

Krillin AI:ローカルで動く動画翻訳・吹き替え・音声クローンツール 180

ローカルで動作する動画翻訳・吹き替え・音声クローンツール。bilibili(哔哩哔哩)、小红書(Xiaohongshu)、抖音(TikTok中国版)、微信视频号、快手、YouTube、TikTokなど主要プラットフォームに対応。

#Ai工具箱 #Ai语音工具

Krillin AI:ローカルで動く動画翻訳・吹き替え・音声クローンツール紹介

Krillin aiとは何ですか?

Krillin AIは、ローカル環境で利用できる動画翻訳、吹き替え、音声クローンのためのツールであり、国内外の主要な動画プラットフォームと互換性があります。OpenAI API仕様に準拠した大規模モデルをサポートし、デフォルトでCosyVoiceまたはカスタム音声クローンに対応しています。中国語、英語、日本語、ドイツ語など100言語以上の多様な音声翻訳サービスをサポートしています。Windows、Linux、Mac版に対応しており、全工程をワンクリックでデプロイでき、抖音、小红書、哔哩哔哩、微信ビデオアカウント、TikTok、YouTube Shortsなどのフォーマットに適応したコンテンツを生成できます。

Krillin AI:ローカル対応の動画翻訳、吹き替え、音声クローン用ツール.webp

Krillin AIの主な機能

  • ワンクリック起動:複雑な設定は不要で、依存関係を自動インストール。新たにデスクトップ版が追加され、より便利になりました。

  • 動画取得:yt-dlpによるダウンロード、またはローカルファイルのアップロードに対応。

  • 高精度認識:Whisper 기반の高精度な音声認識。

  • 智能分段:LLMによる字幕分割とアライメント。

  • 用語置換:専門分野の用語をワンクリックで置換。

  • 專業翻譯:LLM 기반、段落レベルの翻訳で意味の连贯性を保持。

  • 配音克隆:CosyVoice厳選音色またはカスタム音色クローンを提供。

  • 動画合成:横向き・縦向きの動画や字幕レイアウトを自動処理。

大規模モデルサポート

OpenAI API仕様に準拠したすべてのクラウド/ローカル大規模モデルサービスと互換:

  • OpenAI

  • DeepSeek

  • 通義千問

  • ローカルデプロイのオープンソースモデル

  • その他OpenAI形式互換のAPIサービス

言語サポート

  • 入力言語サポート:中国語、英語、日本語、ドイツ語、トルコ語、韓国語、ロシア語、マレー語(継続的に追加中)

  • 翻訳言語サポート:英語、中国語、ロシア語、スペイン語、フランス語など101言語

Krillin AIデスクトップ版のインストール方法

1. デスクトップ版ファイルのダウンロード

  • Krillin AIのGitHubリポジトリにアクセス:Krillin AI GitHub。

  • リポジトリの「releases」ページで、お使いのOSに適したデスクトップ版の実行ファイル(ファイル名にdesktopを含むバージョン)を見つけ、ローカルにダウンロードします。

2. 空フォルダの作成

  • パソコン上に空のフォルダを作成し、ダウンロードしたデスクトップ版の実行ファイルをそのフォルダに配置します。

3. ソフトウェアの起動

  • Windowsユーザー:ダウンロードした実行ファイルをダブルクリックするだけでソフトウェアが起動します。

  • macOSユーザー:デスクトップ版には署名問題があるため、手動でアプリを信頼する必要があります:

  • ターミナルを開き、実行ファイルのあるディレクトリに移動します。

以下のコマンドを実行します(ファイル名がKrillinAI_1.0.0_desktop_macOS_arm64の場合):

sudo xattr -cr ./KrillinAI_1.0.0_desktop_macOS_arm64
sudo chmod +x ./KrillinAI_1.0.0_desktop_macOS_arm64
./KrillinAI_1.0.0_desktop_macOS_arm64

これでソフトウェアが起動します。

4. ソフトウェアの設定

  • デスクトップ版は設定フローを簡略化していますが、ソフトウェア内でいくつかの基本設定(音声認識や翻訳サービスプロバイダーの選択、該当するAPIキー(OpenAIのAPIキーなど)の入力など)を行う必要があります。

  • より高度な設定が必要な場合は、公式ドキュメントの設定ガイドを参照してください。

5. 利用開始

  • 設定完了後、Krillin AIを使用して動画処理(字幕生成、翻訳、吹き替えなど)を行うことができます。

Github:https://github.com/krillinai/KrillinAI

Krillin AI:ローカルで動く動画翻訳・吹き替え・音声クローンツール に関連するツール