Story Flicks – ein Open-Source-Tool zur Erstellung von HD-Story-Kurzfilmen

Story Flicks – ein Open-Source-Tool zur Erstellung von HD-Story-Kurzfilmen 135

Ein Open-Source-Tool auf Basis großer KI-Modelle zur Erstellung von Story-Kurzfilmen. Der Nutzer gibt ein Thema ein und erhält schnell ein Video mit KI-generierten Bildern, Erzähltext und Audio.

#Ai工具箱 #Ai视频生成

Story Flicks – ein Open-Source-Tool zur Erstellung von HD-Story-KurzfilmenEinführung

Story Flicks ist ein Open-Source-KI-Tool zur Erstellung von kurzen Story-Videos, das auf einem großen KI-Sprachmodell basiert. Es kombiniert fortschrittliche Sprachmodelle mit Bildgenerierungstechnologie und kann auf Basis eines vom Nutzer eingegebenen Story-Themas schnell Videos erstellen, die KI-generierte Bilder, Story-Inhalte und Audio enthalten. Es bietet hauptsächlich einen Service zur Erzeugung von HD-Kurzfilmen mit nur einem Klick und eignet sich besonders für Content-Ersteller, Pädagogen und Marketingfachleute, die visuelle Inhalte schnell produzieren möchten.

Story Flicks.webp

Funktionsmerkmale:

  • Intelligente Generierung: Der Nutzer gibt lediglich ein Story-Thema oder Stichwörter ein, und das System generiert automatisch das passende Kurzvideo und liefert in kurzer Zeit mehrere kreative Ergebnisse.

  • Mehrsprachige Unterstützung: Story Flicks unterstützt mehrere Sprachen. Nutzer können je nach Bedarf die gewünschte Sprache für die Inhaltserstellung auswählen, was die Nutzung komfortabler und flexibler macht.

  • Kombination aus Bild und Audio: Neben der Erstellung von Textinhalten und Story-Handlungen kann Story Flicks das Video auch mit KI-generierten Bildern und Hintergrund-Soundeffekten versehen, was die Sehqualität insgesamt verbessert.

  • Multimodale Generierung: Story Flicks nutzt ein großes Sprachmodell (LLM) zur intelligenten Analyse und kann ein Erzählgerüst aufbauen, wobei visuelle, auditive und textuelle Elemente synchron zusammengeführt werden. Das bedeutet, dass es nicht nur Text-Stories generiert, sondern auch automatisch passende KI-Bilder, dynamische Sprachkommentare und intelligente Untertitel erstellt.

  • KI-Bildgenerierung: Story Flicks nutzt Bildgenerierungstechnologie, um für Szenen und Figuren der Story lebendige visuelle Effekte zu schaffen, wodurch die erzeugten Videoinhalte eine starke visuelle Anziehungskraft erhalten.

  • Integrierte Audioproduktion: Sie umfasst dynamische Sprachkommentare, was bedeutet, dass Nutzer kein zusätzliches Audio aufnehmen oder suchen müssen – das System generiert die Sprache automatisch passend zum Story-Inhalt.

  • Intelligente Untertitel: Untertitel können automatisch erstellt und angeordnet werden, was hörgeschädigten Nutzern das Verständnis des Videoinhalts erleichtert und die Zugänglichkeit des Videos verbessert.

  • Technischer Stack: Im Backend werden Python und FastAPI eingesetzt, im Frontend React, Ant Design und Vite, um einen effizienten und stabilen Betrieb des Systems sowie eine gute Entwicklungserfahrung für die Nutzer zu gewährleisten.

Anwendungsszenarien:

  • Kreative Content-Produktion: Geeignet für Kurzvideo-Blogger, selbstständige Content-Creator und Marketingfachleute, um durch die schnelle Erstellung visuell ansprechender Story-Inhalte die Effizienz zu steigern.

  • Bildung und Schulung: Auch in der Bildungsbranche sehr nützlich, um den Lernenden anschauliches Lernmaterial zur Verfügung zu stellen, etwa lehrreiche Kurzvideo-Inhalte.

  • Unterhaltung und Werbung: Personen aus der Unterhaltungsbranche und Werbeproduzenten können damit rasch Werbevideos erstellen.

  • Privater Gebrauch: Auch Privatpersonen können problemlos Erinnerungsvideos erstellen oder Storys teilen.

Verwendung von Story Flicks:

Story Flicks的使用方法.webp

1. Projekt herunterladen:

git clone https://github.com/alecm20/story-flicks.git

2. Modelleinstellungen konfigurieren

# 先切换到项目的 backend 目录下
cd backend
cp .env.example .env
text_provider="openai"    # 文本生成模型的提供商,目前支持 openai和 aliyun、deepseek、ollama、siliconflow,阿里云文档:https://www.aliyun.com/product/bailian
image_provider="aliyun"   # 图片生成模型的提供商,目前支持 openai和 aliyun、siliconflow
openai_base_url="https://api.openai.com/v1" # openai 的 baseUrl
aliyun_base_url="https://dashscope.aliyuncs.com/compatible-mode/v1" # 阿里云的 baseUrl
deepseek_base_url="https://api.deepseek.com/v1" # deepseek 的 baseUrl
ollama_base_url="http://localhost:11434/v1" # ollama 的 baseUrl
siliconflow_base_url="https://api.siliconflow.cn/v1" # siliconflow 的 baseUrl
openai_api_key= # openai 的 api key,可以只填一个
aliyun_api_key= # 阿里云百炼的 api key,可以只填一个
deepseek_api_key= # deepseek 的 api key,目前该 api_key 只支持文本生成
ollama_api_key= # 如果需要使用的话,请填写ollama,目前该 api_key 只支持文本生成,并且不能用参数量太小的模型,推荐qwen2.5:14b 或者更大的模型。
siliconflow_api_key= # siliconflow 的文本模型目前只支持兼容 OpenAI 格式的大模型,如:Qwen/Qwen2.5-7B-Instruct。图像模型只测试了:black-forest-labs/FLUX.1-dev
text_llm_model=gpt-4o # 如果 text_provider 设置为 openai,这里只能填 OpenAI 的模型,如:gpt-4o。如果设置了 aliyun,可以填阿里云的大模型,如:qwen-plus 或者 qwen-max。ollama 的模型不能使用体积太小的模型,否则无法输出正确的 json,可以使用如:qwen2.5:14b 或更大的模型。
image_llm_model=flux-dev # 如果 image_provider 设置为 openai,这里只能填 OpenAI 的模型,如:dall-e-3。如果设置了 aliyun,可以填阿里云的大模型,阿里云推荐使用:flux-dev,目前可以免费试用,具体参考:https://help.aliyun.com/zh/model-studio/getting-started/models#a1a9f05a675m4。

3. Projekt mit Docker starten

Führen Sie im Projektstammverzeichnis folgenden Befehl aus:

docker-compose up --build

4. Nutzung starten

  • Story-Thema eingeben: Wählen Sie in der Oberfläche des Generierungstools den Anbieter des Textgenerierungsmodells, den Anbieter des Bildgenerierungsmodells, das Textmodell, das Bildgenerierungsmodell, die im Video verwendete Sprache, die Stimme, das Story-Thema sowie die Story-Abschnitte aus.

  • Videoerstellung: Nachdem Sie auf die Schaltfläche „Generieren" geklickt haben, verarbeitet das System die Eingaben mithilfe von KI und erstellt das fertige Video innerhalb weniger Sekunden.



Ähnliche Themen:

KI-Tools für Kinderbilderbücher

KI-Story-Generierung

Ähnliche Tools zu Story Flicks – ein Open-Source-Tool zur Erstellung von HD-Story-Kurzfilmen