Personalized Restoration: 정밀한 얼굴 복원 및 개인 맞춤 편집 기술 133

Personalized Restoration, 안면 이미지 정밀 복원 및 개성 편집 기술로, Personalized Restoration은 손상된 이미지의 디테일을 복원할 뿐만 아니라 개인의 고유한 안면 특징을 정확하게 포착하고 재현하여 복원된 이미지가 선명하고 자연스러우며 원래의 모습에 충실하도록 보장합니다. 동시에 얼굴 교체도 지원합니다.

Personalized Restoration은 텍스트 가이드와 모델 조정을 결합한先进的 쌍축 조정 방법을 통해 복원된 이미지가 원래의 모습에 충실하면서도 개인의 고유한 정체성을 유지하도록 보장합니다.

또한 Personalized Restoration은 텍스트 가이드 편집도 지원하여 사용자가 간단한 텍스트 프롬프트를 통해 복원된 이미지의 특정 디테일을 변경할 수 있도록 합니다.

Personalized Restoration 기능 특징:

• 참조 이미지를 활용한 개인화 확산 사전 지식 활용

• 디노이징 프레임워크에서 안면 정체성 정보 보존

• 열화된 이미지의 시각적 속성 보존

Personalized Restoration 사용 시나리오:

• 특정 유명인의 참조 사진 몇 장을 활용해 개인화된 확산 모델로 인물 이미지 복원

• 다양한 개인화 모델을 사용해 얼굴 교체 효과 구현

• 텍스트 프롬프트와 결합해 개인화 모델의 텍스트 기반 편집 실현

Personalized Restoration의 주요 기능 및 역할:

당신의 외할아버지가 젊은 시절 찍은 흐릿한 사진이 한 장 있다고 가정해 봅시다. 이 사진은 매우 중요하지만, 오랜 세월이 지나면서 매우 흐릿하고 색이 바래 얼굴 디테일을 거의 알아볼 수 없게 되었습니다. 이 사진을 더 선명하고 원래 상태에 가깝게 복원하고 싶습니다.

기존의 이미지 복원 기술은 사진을 더 선명하게 만들 수 있지만, 특정 미소나 눈의 모양과 같은 외할아버지의 고유한 안면 특징을 잃어버릴 수 있습니다. 이는 기존 기술이 일반적인 이미지 모델에 의존하며, 외할아버지의 고유한 외모에 특별히 맞춰져 있지 않기 때문입니다.

Personalized Restoration 조정 과정:

1. 텍스트 가이드 조정 단계:

외할아버지의 다른 시기의 선명한 사진도 몇 장 있다고 가정합니다. 이 사진들과 일부 설명 텍스트(예: "젊은 시절의 외할아버지, 안경 착용, 특별한 미소 보유")가 생성 모델 G를 미세 조정하는 데 사용됩니다. 이 미세 조정 과정을 통해 모델이 외할아버지의 눈 모양, 미소 방식 등 고유한 안면 특징을 이해하고 학습할 수 있습니다.

2. 모델 기반 조정 단계:

다음으로, 미세 조정된 생성 모델 G가 고정된 상태에서 가이드 네트워크 E가 조정됩니다. 이 단계의 목적은 가이드 네트워크가 흐릿한 사진을 복원할 때 개인화된 특징(예: 외할아버지의 미소)과 이미지의 다른 측면(예: 색상 및 선명도)을 동시에 고려하도록 하는 것입니다.

최종 결과는 다음과 같습니다: 복원된 사진은 선명해질 뿐만 아니라 색상과 디테일도 개선되었습니다.더 중요한 것은 이 사진이 외할아버지의 고유한 안면 특징을 충실히 반영하여 한눈에 그분임을 알아볼 수 있게 했다는 점입니다.

이러한 쌍축 조정 방법을 통해, 본 시스템은 개인의 고유한 특징을 보존하면서도 자연스럽고 고품질의 이미지를 복원할 수 있어, 오래된 사진이 새 생명을 얻고 개인적 기억의 가치가 더욱 높아집니다.

동시에 안면 교환 기능도 지원하여 개인의 특징을 다른 이미지에 적용해全新的 시각적 경험을 만들 수 있습니다. 예를 들어, 특정인의 안면 특징을 다른 사람의 사진으로 전달할 수 있습니다.

또한 텍스트 가이드 편집도 지원하여, 사용자가 프롬프트 수정자(예: "미소 짓기" 및 "파란 눈")를 사용해 복원과 함께 관련된 편집을 활성화할 수 있도록 합니다.