StreamV2V: 실시간 비디오 얼굴 교체 및 스타일 변환 오픈소스 도구 195

StreamV2V: 실시간 비디오 변환을 위한 오픈소스 도구로, 실시간 얼굴 교체와 스타일 변환을 수행할 수 있으며, RTX 4090 GPU에서 실시간 비디오-투-비디오 변환을 구현하고 처리 프레임 속도가 20 FPS에 달합니다.

스트리밍 방식이기 때문에 StreamV2V는 무한 길이의 비디오를 지원하며, 실시간 프롬프트로 비디오를 제어할 수 있습니다. 과거 프레임의 정보를 저장하는 특징 라이브러리를 유지함으로써, 새로운 프레임이 도착하면 모델은 이 라이브러리의 특징을 활용하여 출력을 생성하며, 마치 과거를 돌아보는 것과 같습니다.

StreamV2V는 스트리밍 입력을 처리할 수 있으며, 입력 비디오는 실시간 스트리밍 비디오, 예를 들어 웹캠에서 전송되는 비디오 스트림이 될 수 있습니다.

StreamV2V는 비디오 속 얼굴을 다른 사람의 얼굴로 교체하는 것을 지원할 뿐만 아니라, 비디오를 다양한 예술 스타일로 변환하는 것도 지원합니다. 여기에는 다음이 포함됩니다:

클레이 애니메이션 스타일: 비디오를 클레이 애니메이션과 유사한 효과로 처리합니다.

그라ffiti 아트 스타일: 비디오를 손으로 그린 낙서와 유사한 예술적 효과로 변환합니다.

StreamV2V 공식 웹사이트: https://jeff-liangf.github.io/projects/streamv2v/

GitHub：https://github.com/Jeff-LiangF/streamv2v