StreamV2V: Open-Source-Tool für Echtzeit-Gesichtstausch und Stiltransfer in Videos 198

小编 · 2024-05-29

StreamV2V ist ein Open-Source-Tool zur Echtzeit-Video-zu-Video-Umwandlung, das Gesichts-Swapping und Stiltransfer ermöglicht. Es erreicht Echtzeit-V2V-Konvertierung auf einer RTX 4090 GPU mit einer Verarbeitungsrate von 20 FPS.

StreamV2V: Open-Source-Tool für Echtzeit-Gesichtstausch und Stiltransfer in Videos

StreamV2V: Ein Open-Source-Tool zur Echtzeit-Video-Transformation, das Echtzeit-Gesichtstausch und Stiltransformationen in Videos ermöglicht. StreamV2V kann Echtzeit-Video-zu-Video-Transformationen auf einer RTX 4090 GPU durchführen und erreicht eine Bildrate von 20 FPS.

StreamV2V：视频实时换脸和风格转换的开源工具

Da es Streaming-basiert arbeitet, unterstützt StreamV2V Videos von unbegrenzter Länge und ermöglicht die Steuerung des Videos in Echtzeit durch Prompts. Es pflegt eine Merkmalsbibliothek, die Informationen vergangener Frames speichert. Wenn ein neuer Frame eintrifft, nutzt das Modell die Merkmale aus dieser Bibliothek, um die Ausgabe zu generieren – so, als würde es in die Vergangenheit blicken.

StreamV2V kann Streaming-Eingaben verarbeiten; das eingegebene Video kann ein Echtzeit-Streaming-Video sein, beispielsweise ein Videostream, der von einer Webcam übertragen wird.

StreamV2V unterstützt den Austausch von Gesichtern in Videos durch andere Gesichter und kann Videos zudem in verschiedene künstlerische Stile umwandeln, einschließlich:

Knetanimation-Stil: Verarbeitet das Video zu einem Effekt, der einer Knetanimation ähnelt.

Doodle-Kunststil: Wandelt das Video in einen Effekt um, der handgezeichneten Kritzeleien ähnelt.

StreamV2V Offizielle Website: https://jeff-liangf.github.io/projects/streamv2v/

GitHub：https://github.com/Jeff-LiangF/streamv2v