Stability AI, 새로운 이미지 생성 모델 Stable Cascade 발표 195

텍스트-이미지 분야의 선두주자 Stability AI가 최근 Stable Cascade라는 이름의 새로운 모델을 발표했습니다. 이는 Würstchen 아키텍처 기반의 텍스트-이미지 생성 모델입니다. 체크포인트와 추론 스크립트 외에도 Stability ai는 파인튜닝, ControlNet 및 LoRA 학습용 스크립트도 함께 제공하여, 사용자가 Stability GitHub 페이지에서 이 새로운 아키텍처를 추가로 실험해 볼 수 있도록 했습니다.

Stability AI는 Stable Cascade가 업계 선두 주자였던 전작 Stable Diffusion보다 더 빠르고 강력하다고 약속했으며, Stable Diffusion은 다른 많은 텍스트-이미지 생성 도구들의 기반이 되었습니다.

Stable Cascade란 무엇인가요?

Stable Cascade는 자연어 프롬프트로부터 사실적이고 다양한 이미지를 생성할 수 있는 텍스트-이미지 생성 모델입니다.

Stable Cascade는 사진을 생성할 수 있을 뿐만 아니라 다양한 이미지 편집 작업을 수행하거나 기존 이미지의 해상도를 높이는 데에도 사용할 수 있습니다.예를 들어 기존 이미지의 해상도를 높이거나, 이미지의 특정 부분을 수정하거나, 다른 이미지의 엣지로부터 새로운 이미지를 생성하는 등의 작업이 가능합니다.

표준적인 텍스트-이미지 생성 외에도 Stable Cascade는 이미지 변형 및 이미지-이미지 생성도 수행할 수 있습니다.

모델과 함께 공개된 Controlnet 기능:

부분 리페인트: 텍스트 프롬프트와 함께 제공되는 마스크와 짝을 이루는 이미지를 입력하면, 모델이 제공된 텍스트 프롬프트에 따라 이미지의 마스크 부분을 채워줍니다.

Canny Edge: 모델에 입력된 기존 이미지의 엣지를 추적하여 새로운 이미지를 생성합니다. 이 테스트는 스케치로부터 확장하는 것도 가능합니다.

2x 초해상도: C 단계에서 생성된 잠재 공간에도 사용할 수 있습니다.

Stable Cascade는 어디에서 찾을 수 있으며, 무엇을 할 수 있나요?

Stable Cascade는 현재 GitHub에서 연구 목적으로만 제공되며 상업적 용도로는 사용할 수 없습니다.

Stable Cascade github 소스 코드 저장소:https://github.com/Stability-AI/StableCascade

Stability AI는 Stable Cascade를 사용하여 다양한 이미지 생성 및 편집 작업을 수행하는 방법을 보여주는 Colab 노트북을 제공합니다. 또한 해당 사이트에서 Stable Cascade로 생성된 이미지 예시들을 살펴볼 수도 있습니다.

Stable Cascade는 콘텐츠 제작, 디자인, 교육, 엔터테인먼트 등 다양한 용도로 활용할 수 있는 다재다능한 모델입니다. 예를 들어 Stable Cascade를 사용하여 가상의 인물, 풍경, 동물, 로고 또는 텍스트로 설명할 수 있는 기타 모든 이미지를 생성할 수 있습니다.

"Stable Cascade"를 사용하여 기존 이미지를 향상 또는 수정할 수도 있습니다. 예를 들어 해상도를 높이거나, 스타일을 변경하거나, 객체를 추가 또는 제거하거나, 엣지로부터 새로운 이미지를 생성하는 작업이 가능합니다.