Krillin AI : Outil professionnel de traduction, doublage et clonage vocal basé sur les LLMs 130

Qu'est-ce que Krillin ai ?

Krillin AI est un outil professionnel de traduction vidéo, de doublage et de clonage vocal basé sur les grands modèles de langage (LLMs), permettant de déployer l'ensemble du processus en un clic. Il peut générer du contenu adapté aux plateformes telles que Douyin, Xiaohongshu, Bilibili, WeChat Channels, TikTok, YouTube Shorts, etc., prend en charge Bilibili, et supporte la traduction en 56 langues, dont le chinois, l'anglais, le japonais, l'allemand, le turc, etc. Grâce à un flux de travail de bout en bout, les utilisateurs n'ont besoin que de quelques clics pour transformer des matériaux bruts en contenu multiplateforme.

Fonctionnalités de Krillin AI

• Démarrage du processus complet en un clic : aucune configuration complexe requise, installation automatique des dépendances, du téléchargement de la vidéo à la sortie du produit final en un seul clic.

• Prise en charge multilingue : prend en charge la traduction en 56 langues, couvrant les principales langues mondiales.

• Adaptation multiplateforme : compatible avec les formats de contenu de Douyin, Xiaohongshu, Bilibili, TikTok, YouTube, etc.

• Acquisition vidéo : intégration de yt-dlp, prenant en charge le téléchargement de vidéos depuis YouTube, Bilibili et d'autres plateformes, ainsi que le téléchargement de vidéos locales.

• Reconnaissance et traduction de sous-titres : utilise le modèle Whisper pour une reconnaissance de sous-titres de haute précision, prenant en charge les services vocaux et de grands modèles de fournisseurs majeurs comme OpenAI, Alibaba Cloud, etc.

• Segmentation et alignement intelligents des sous-titres : utilise des algorithmes propriétaires pour segmenter et aligner intelligemment les sous-titres, évitant les décalages et la perte de contexte.

• Remplacement de vocabulaire personnalisé : prend en charge le remplacement de vocabulaire en un clic, s'adaptant au style linguistique de domaines spécifiques.

• Traduction professionnelle : moteur de traduction par段落整段, garantissant la cohérence contextuelle et la fluidité sémantique.

• Doublage et clonage vocal : possibilité de choisir des voix masculines ou féminines par défaut pour générer le doublage de la vidéo traduite, ou de télécharger un échantillon audio local pour cloner une voix.

• Composition vidéo : compose en un clic des vidéos horizontales et verticales, traitant automatiquement les sous-titres dépassant la largeur.

Scénarios d'application de Krillin AI

• Passionnés de cinéma et de séries : brise les barrières linguistiques, permettant aux amateurs de films et de séries d'explorer le monde du divertissement mondial.

• Créateurs de contenu : économise du temps et des coûts, produisant rapidement des versions multilingues de contenu vidéo.

• Formation en entreprise et communication internationale : aide les entreprises multinationales à traduire rapidement les vidéos de formation ; traduit en temps réel les interventions lors de conférences internationales.

Tutoriel d'utilisation de Krillin AI

1. Installation et démarrage : aucune configuration complexe requise, installez et lancez directement Krillin AI.

2. Importation vidéo : téléchargez des vidéos via l'outil intégré yt-dlp, ou importez des vidéos locales.

3. Reconnaissance et traduction des sous-titres : choisissez la langue cible, Krillin AI effectuera automatiquement la reconnaissance et la traduction des sous-titres.

4. Doublage et composition : choisissez une voix de doublage ou importez un échantillon audio pour le clonage vocal, puis composez la vidéo en un clic.

Étapes de base pour installer Krillin AI

1. Télécharger le fichier exécutable :

• Rendez-vous sur la page Release de Krillin AI et trouvez le fichier exécutable correspondant au système de votre appareil (par exemple, version Windows ou macOS).

• Placez le fichier téléchargé dans un dossier vide.

2. Configuration du fichier de configuration :

• Créez un dossier nommé config dans le dossier principal.

• Créez un fichier nommé config.toml dans le dossier config.

• Copiez le contenu du fichier config-example.toml du répertoire config du code source de Krillin AI et collez-le dans le fichier config.toml.

• Remplissez les informations de configuration selon vos besoins. Si vous avez besoin d'utiliser le modèle OpenAI mais ne savez pas comment obtenir une clé API, vous pouvez rejoindre le groupe QQ fourni par le projet pour un essai gratuit.

3. Démarrer le service :

• Double-cliquez sur le fichier exécutable, ou exécutez le fichier dans le terminal pour démarrer le service.

• Ouvrez le navigateur et saisissez http://127.0.0.1:8888 (si vous avez modifié le port dans le fichier de configuration, utilisez le port que vous avez défini).

Projet Github :https://github.com/krillinai/KrillinAI