- 글쓴시간
- 분류 기술,IT/스테이블 디퓨전
SD로 생성한 그림에 예쁜 옷을 입히기 위해 LoRA 를 사용하곤하는데, 이렇게 하면 얼굴이 변경되는 문제가 있다. LoRA 를 트레이닝 할 때 사용된 이미지에 얼굴이 있고 이게 이미지 생성시 반영되기 때문이다.
그래서 요즘 나오는 의복용 LoRA 에는 일부러 얼굴을 학습시키지 않는 경우도 있다. CivitAI 에서 봐도 이렇게 트레이닝된 LoRA 들이 꽤 보인다. 이런 LoRA 는 얼굴이 변경되지 않기 때문에 이미지 생성하기 편해진다. 문제는 예전에 작성된 LoRA 다. 이런건 답이 없다.
그래서 생각해낸게,
"540x960 에 Hires. fix 를 사용해 1080x1920 이미지를 생성"
하던걸
1. 540x960, Face Editor 사용 (Face Editor 용 프롬프트는 LoRA 제거한 프롬프트로 넣음)
2. img2img 에서 LoRA 제거한 프롬프트를 넣어 SD upscale.
와 같이 진행한다. 이렇게 하니 만족할만한 결과가 나왔다. 얼굴이 거의 LoRA 사용 전의 모습으로 나오기 때문이다. 아래는 그 예이다. 이 이미지에 사용된 LoRA 와 그 해시값은 아래와 같다.
Gini_S2: e2e472c06607, last1234: 301e2ea327fa, ggx_V11: cd7ed3536d8f
참고로 Face Editor 는 https://github.com/ototadana/sd-face-editor.git 를 사용했다.
