LanPaint: Stable Diffusion 모델용 추가 학습 불필요의 고품질 이미지 인페인팅 도구 195

小编 ·

LanPaint: Stable Diffusion 모델용 추가 학습 불필요의 고품질 이미지 인페인팅 도구

LanPaint는 Stable Diffusion 기반 모든 모델과 호환되는 추가 학습이 필요 없는 고품질 이미지 인페인팅 도구입니다. 여러 번의 반복적인 '사고' 과정을 통해 노이즈 제거 단계를 최적화하여 매끄럽고 정밀한修复 결과를 구현합니다.

LanPaint: Stable Diffusion 모델용 추가 학습 불필요의 고품질 이미지 인페인팅 도구

LanPaint란 무엇인가요?

LanPaint는 추가 학습 없이 사용할 수 있는 고품질 이미지 복원 도구로, 모든 Stable Diffusion 기반 모델에 적용할 수 있습니다. 반복적인 "사고" 과정을 통해 노이즈 제거 단계를 최적화하여 매끄럽고 정밀한 복원 효과를 구현합니다.

HmDdD5XM.jpg

LanPaint 기능 특징

  • 학습 불필요: LanPaint는 사용자 지정 모델을 포함한 모든 Stable Diffusion 모델과 즉시 호환됩니다.

  • 간편한 통합: 표준 ComfyUI KSampler 워크플로우와 동일하여 쉽게 시작할 수 있습니다.

  • 고품질 복원: 정밀한 조건 추론과 빠른 수렴을 갖는 Langevin 역학 프레임워크를 통해 소수의 반복만으로 고충실도 결과를 구현합니다.

LanPaint 사용.webp

LanPaint 사용.webp

LanPaint 사용 방법

1. ComfyUI 설치: 공식 가이드에 따라 ComfyUI를 설치합니다.

2. ComfyUI-Manager 설치: 확장 관리를 위해 사용합니다.

3. LanPaint 노드 설치:

  • ComfyUI-Manager를 통해 LanPaint를 검색하여 설치합니다.

  • 또는 LanPaint 저장소를 ComfyUI/custom_nodes 폴더에 수동으로 복제합니다.

  • ComfyUI 재시작: LanPaint 노드를 로드한 후 ComfyUI의 "샘플링" 카테고리에서 LanPaint 노드를 찾을 수 있습니다.

4. 매개변수 조정

  • LanPaint_NumSteps: 각 노이즈 제거 단계에서의 반복 횟수를 나타내며, 복잡한 작업의 경우 5-10으로 설정하는 것이 좋습니다.

  • LanPaint_Lambda: 내용 정렬 강도를 제어하며, 권장 값은 6.0입니다.

  • LanPaint_StepSize: 각 반복의 스텝 크기로, 권장 값은 0.1이며 어려운 작업의 경우 0.5로 설정할 수 있습니다.

  • LanPaint_cfg_BIG: 마스크 영역과 마스크되지 않은 영역의 CFG 비율을 정렬하는 데 사용되며, 권장 값은 8입니다.

LanPaint 사용 예시

LanPaint는 바구니를 농구공으로 복원, 흰색 셔츠를 파란색 셔츠로 복원, 미소를 슬픈 표정으로 복원하는 등 다양한 예시를 제공합니다. 사용자는 관련 워크플로우 및 마스크 파일을 다운로드하고 ComfyUI에서 해당 모델과 이미지를 로드하여 이러한 예시를 시도해 볼 수 있습니다.

LanPaint 사용.webp

LanPaint 장점

  • 빠른 수렴: Fast Langevin Dynamics(FLD) 프레임워크를 통해 LanPaint는 극히 적은 반복만으로 고품질 복원을 구현합니다.

  • 국소 최적해 함정 회피: 양방향 유도(BiG) 점수 함수를 통해 LanPaint는 큰 스텝 크기의 확산 단계로 인한 국소 최적해 문제를 회피할 수 있습니다.

  • 광범위한 적용성: 특정 데이터셋이나 모델에 대한 학습 없이도 다양한 커뮤니티 학습 확산 모델에 직접 적용할 수 있습니다.

LanPaint 적용 시나리오

  • 이미지 복원: 오래된 사진 복원, 스크래치 또는 손상 부분 제거.

  • 크리에이티브 디자인: 이미지 경계 확장, 내용 교체, 새로운 요소 생성.

  • 예술 창작: 텍스트 프롬프트에 따라 스타일이 일관된 새로운 내용 생성.

  • 상업용 이미지 처리: 광고 디자인, 제품 이미지 최적화.

  • 프라이버시 보호: 모자이크 제거, 흐릿한 내용 복원.

GitHub 저장소 주소:https://github.com/scraed/LanPaint