NarratoAI: All-in-One-Tool für KI-Video-Commentary und automatisierte Bearbeitung 260

📌 Was ist NarratoAI

NarratoAI ist ein Open-Source-Automatisierungstool für Film- und Fernsehkommentare, das auf LLM basiert und den gesamten Prozess „Texterstellung – Videoschnitt – KI-Synchronisation – Untertitelgenerierung" in einen automatisierten Ablauf integriert. Es richtet sich hauptsächlich an Kurzvideo-Ersteller, Uploader von Film- und Serienkommentaren, MCN-Teams sowie Betreiber von selbstverwalteten Medien.

NarratoAI wurde vom GitHub-Nutzer linyqh entwickelt und verfügt derzeit über rund 7K Sterne und 880 Forks. Es unterstützt sowohl lokale Bereitstellung als auch Docker-Bereitstellung.

✨ Funktionen und Merkmale von NarratoAI

🎬 Intelligente Texterstellung: Nutzt LLM zur automatischen Generierung von Videokommentartexten und unterstützt mehrere Sprachen

🎞️ Automatisierter Videoschnitt: Schneidet Videos automatisch anhand des Skripts, unterstützt einen zufälligen Zusammenfügemodus und ermöglicht die Anpassung von Clipdauer und Bildseitenverhältnis (z. B. 9:16 Hochformat)

🗣️ KI-Sprachgenerierung: Integrierte mehrsprachige TTS-Sprachsynthese mit einstellbarer Lautstärke und Geschwindigkeit sowie verschiedenen Stimmstilen

📝 Intelligente Untertitelerstellung: Generiert automatisch sprachsynchrone Untertitel mit anpassbarer Schriftart, Position, Farbe und Kontur

👀 Optimierte Inhaltsvorschau: Vor der Generierung können Segmentzeitstempel, Bildbeschreibungen und der zugehörige Kommentartext in der Vorschau angezeigt werden; einzelne Segmente können separat neu generiert werden

🚀 Multi-Modell-Unterstützung: Unterstützt Modelle wie Alibaba Qwen2-VL, DeepSeek R1/V3, Google Gemini und weitere

💻 Vielfältige Anwendungsszenarien: Deckt beliebte Erstellungsszenarien wie allgemeine Filmkommentare, Kurzdrama-Kommentare und Kurzdrama-Mixes ab

🔍 SEO-Optimierung: Optimiert die Inhaltsstruktur basierend auf Schlüsselwörtern, um die Sichtbarkeit in Suchmaschinen zu verbessern

🎯 Anwendungsszenarien von NarratoAI

• Erstellung von Film- und Serienkommentaren: Schnelle Erstellung professioneller Kommentarvideos für Filme, Serien und Kurzdramen

• Kurzvideo-Produktion: Massenproduktion von Kurzvideoinhalten für Plattformen wie Douyin, Kuaishou, Bilibili und Video Account

• Bildungs- und Schulungsvideos: Lehrer oder Bildungsinstitutionen erstellen schnell Lehrmaterialien und Demonstrationen

• Kommerzielle Produktpräsentation: Unternehmen erstellen Produktvorstellungsvideos, die Merkmale und Vorteile hervorheben

• Betrieb selbstverwalteter Medien: Einzelne Ersteller verwirklichen tägliche Veröffentlichungen mehrerer Inhalte und steigern den Einfluss ihres Kontos

✅ Vor- und Nachteile von NarratoAI

Vorteile

• Vollständige Prozessautomatisierung: Von Text bis zum fertigen Video mit einem Klick, ein vollständiges Video wird in unter 10 Minuten generiert, Effizienzsteigerung von über 80 %

• Keine Einstiegshürden: Keine professionellen Schnittkenntnisse nötig, auch Anfänger können schnell loslegen

• Extrem geringe Kosten: Der Schnitt eines 10-Minuten-Videos kostet nur ca. 0,1 Yuan (API-Aufrufgebühren)

• Open Source und kostenlos: Vollständig kostenlos nutzbar, transparenter Code, unterstützt Weiterentwicklung

• Flexible Anpassung: Manuelle Parameteranpassung zur Erfüllung individueller Gestaltungsanforderungen möglich

Nachteile

• Modellabhängigkeit: Frühere Versionen waren hauptsächlich auf das Google-Gemini-Modell angewiesen, mit eingeschränkter Unterstützung für andere Modelle (neuere Versionen haben dies verbessert)

• Hardwareanforderungen: Eine Grafikkarte ist nicht zwingend erforderlich, jedoch werden 4 CPU-Kerne + 8 GB Arbeitsspeicher benötigt

• Einschränkungen bei der chinesischen Sprachunterstützung: Frühere Versionen hatten Einschränkungen bei der Verarbeitung chinesischer Videos; Dateinamen dürfen keine chinesischen Zeichen, Sonderzeichen oder Leerzeichen enthalten

• Konsistenz der Ergebnisse: Automatisch erstellte Inhalte müssen möglicherweise manuell feinjustiert werden, um optimale Ergebnisse zu erzielen

🛠️ Verwendung von NarratoAI

Vorbereitung der Umgebung

• Systemanforderungen: Windows 10+ / MacOS 11.0+ / Linux

• Hardwarekonfiguration: 4 CPU-Kerne, 8 GB Arbeitsspeicher (Grafikkarte nicht erforderlich)

• Python-Version: 3.10 oder höher

Bereitstellungsmethoden (eine von beiden wählen)

Methode 1: Lokale Bereitstellung

git clone https://github.com/linyqh/NarratoAI.git
cd NarratoAI
pip install -r requirements.txt
cp config.example.toml config.toml
# 编辑 config.toml 填入 API Key
streamlit run webui.py --server.maxUploadSize=2048

Methode 2: Docker-Bereitstellung

git clone https://github.com/linyqh/NarratoAI.git
cd NarratoAI
docker-compose up -d

Nutzungsablauf

1. Grundkonfiguration: http://localhost:8501 aufrufen, API-Key konfigurieren und KI-Modell auswählen

2. Video hochladen: mp4-Datei in das Verzeichnis resource/videos ablegen (der Dateiname darf keine chinesischen Zeichen oder Sonderzeichen enthalten)

3. Skript generieren: KI analysiert automatisch den Videoinhalt und erstellt den Kommentartext

4. Vorschau und Anpassung: Überprüfen, ob Segmente und Kommentar übereinstimmen; nicht zufriedenstellende Teile können neu generiert werden

5. Parameter konfigurieren: Bildseitenverhältnis, Synchronisationsstil, Untertitelstil usw. einstellen

6. Video generieren: Auf Start klicken und warten, bis KI Schnitt, Synchronisation und Untertitel automatisch fertigstellt

❓ Häufig gestellte Fragen

F1: Warum werden chinesische Videodateinamen nicht erkannt?

A: Das System hat Einschränkungen bei Dateinamen. Es wird empfohlen, englische Buchstaben, Zahlen oder Unterstriche zu verwenden und chinesische Zeichen, Leerzeichen sowie Sonderzeichen zu vermeiden.

F2: Welche KI-Modelle unterstützt NarratoAI?

A: Derzeit werden Google Gemini, Alibaba Qwen2-VL, DeepSeek R1/V3 usw. unterstützt. Für Videoanalysen werden die Qwen-Modelle empfohlen.

F3: Können die generierten Videos kommerziell genutzt werden?

A: Die Urheberrechte des Originalvideomaterials müssen beachtet werden. Für die kommerziellen Nutzungsrechte der KI-generierten Inhalte wird empfohlen, die jeweiligen Nutzungsbedingungen des verwendeten Modelldienstes zu konsultieren.

F4: Was kann ich tun, wenn das Schnittbild nicht zufriedenstellend ist?

A: In der Vorschau können einzelne Segmente separat neu generiert oder das Skript manuell angepasst werden.

F5: Wird der Export zu Jianying (剪映) unterstützt?

A: Künftige Versionen planen die Unterstützung des Exports von Jianying-Entwürfen.

F6: Ist die Fernbereitstellung sicher?

A: Es werden fortschrittliche Verschlüsselungstechnologien verwendet, um die Sicherheit von Datenübertragung und -speicherung zu gewährleisten. Es wird jedoch empfohlen, die Software über offizielle Kanäle zu beziehen.

🔗 Zugehörige Links

GitHub-Repository: https://github.com/linyqh/NarratoAI

Offizielle Dokumentation: https://www.narratoai.cn/

API-Dokumentation: Nach der Bereitstellung http://localhost:8080/docs aufrufen