PhotoMaker: 설명에 따라 인물 사진 생성 128

PhotoMaker는 여러 사진을 신원 ID로 활용하여 인물 특징을 추출한 다음, 설명에 따라 설명과 부합하는 인물 사진을 만들어 새로운 개성 있는 인물 이미지를 생성합니다.

PhotoMaker는 또한 여러 다른 사람의 사진 특징을 혼합하여 완전히 새로운 인물 이미지를 만들어낼 수 있습니다. 사진 속 인물의 성별과 나이를 변경하고, 다양한 스타일의 다른 사진을 생성하는 것도 가능합니다. 빠르고 사실적이며 자연스러운 효과를 냅니다.

PhotoMaker의 주요 기능:

• 텍스트 설명에 따른 사진 제작: 원하는 인물 모습을 설명하면 그에 부합하는 인물 사진을 생성할 수 있습니다.

• 신원 혼합: 사용자가 서로 다른 이미지 ID를 입력으로 제공하면, PhotoMaker는 이러한 서로 다른 ID의 특징을 잘 통합하여 새로운 ID를 형성할 수 있습니다.

• 나이 또는 성별 변경: 예를 들어, 남성 사진을 여성의 모습으로 변환하거나, 사진 속 인물을 더 젊거나 더 나이 들어 보이게 할 수 있습니다.

• 스타일링: 또한 사진에 다양한 예술적 효과(예: 유화 스타일 또는 만화 스타일)를 추가할 수 있습니다. 그 과정에서 ID 속성을 보존합니다.

• 예술품/오래된 사진 속 인물을 현실로 불러오기: 한 사람의 예술 회화, 조각상 또는 오래된 사진을 입력으로 사용하면, PhotoMaker는 한 사람을 이전 세기甚至는 먼 옛날에서 현재 세기로 데려와 그들을 "촬영"할 수 있습니다. 각 이미지 아래에 조건 반사 프롬프트를 표시합니다.

PhotoMaker의 주요 특징:

• 여러 사진의 특징 결합: PhotoMaker는 여러 장의 사진을 사용할 수 있으며, 같은 사람의 사진일 수도 있고 다른 사람의 사진일 수도 있습니다. 이러한 사진들에서 특징을 분석한 후 결합하여 새로운 개성 있는 인물 이미지를 만듭니다.

• 유연한 텍스트 제어: 다른 방법들과 비교하여, PhotoMaker는 더 유연한 텍스트 제어 능력을 제공합니다. 사용자는 텍스트 프롬프트를 통해 이미지 생성을 안내할 수 있어, 생성된 이미지가 사실적일 뿐만 아니라 사용자의 구체적인 요구 사항에도 더 잘 부합합니다.

• 고효율 및 빠른 생성: 대량의 미세 조정이 필요한 방법(예: DreamBooth)과 비교하여, PhotoMaker는 신원 정보를 유지하면서 더 빠른 생성 속도를 제공합니다. 짧은 시간(예: 10초) 내에 맞춤형 인물 사진을 생성할 수 있어, 빠른 결과 생성이 필요한 응용 시나리오에 매우 유리합니다.

• 높은 신원 충실도: PhotoMaker는 이미지 생성 시 인물의 신원 특징을 더 잘 유지할 수 있습니다. 이는 인물 특징의 정확한 보존이 필요한 시나리오(예: 개인화 초상화 또는 신원 인식)에서 특히 중요합니다.

PhotoMaker는 어떻게 작동하나요?

PhotoMaker는 먼저 사진을 분석하여 각 사진에서 인물 특징(예: 얼굴 특징, 헤어스타일, 의상 스타일 등)을 식별합니다. 그런 다음 이러한 특징들을 결합하여 새로운 이미지를 만듭니다. 이 이미지는 기본적으로 사용자의 얼굴이지만, 영화 배우의 헤어스타일과 표정을 가지면서 동시에 그 역사 의상 사진 속 의상을 착용하고 있을 수 있습니다.

최종 결과는 완전히 새로운 사진으로, 이 사진은 고유한 인물 이미지를 보여줍니다: 사용자처럼 보이지만 다른 사진 속 인물의 특징과 스타일을 갖추고 있습니다. 이것이 바로 PhotoMaker의 핵심 기능입니다 — 여러 다른 사진들의 특징을 결합하여 완전히 새로운 개성 있는 이미지를 창조합니다.

소스 코드: https://github.com/TencentARC/PhotoMaker