Qwen Draw2Photo: 스케치를 사실적인 사진으로 바꾸다

대충 스케치를 그리고, 누군가의 사진을 찍어, AI가 이를 병합해 실제로 그 사람처럼 보이는 사실적인 이미지를 만들 수 있다면?それが Qwen Draw2Photo가 하는 일이다.

Draw2Photo란?

Draw2Photo는 알리바바 Tongyi 연구소의 새로운 이미지 생성 기술이다. 두 가지 입력을 받는다:

1. 간단한 스케치 — 대략적인 선 그림, 막대기 인형,落書き
2. 참조 사진 — 사람의 사진

모델은 스케치의 포즈와 구성을 따르면서 참조 사진 속 인물의 정체성을 보존한 사실적인 이미지를 생성한다.

작동 방식

핵심 혁신은 정체성 보존 LoRA 융합:

• 스케치 조건화 — 모델이 스케치의 공간적 레이아웃, 포즈, 형태 이해
• 정체성 보존 — LoRA 어댑터가 참조 사진에서 얼굴 특징과 외모 추출
• 융합 — 생성 중 두 신호 결합

References

• Qwen official site
• Tongyi Lab
• Demo
• LoRA weights