윈디하나의 누리사랑방. 이런 저런 얘기

글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - SD 1.5 LCM(Latent Consistency Model)

이미지 생성시간을 획기적으로 줄일 수 있는 방법중 하나로 LCM 을 사용하는 방법이 있다. 쉽게 말하면 (필자가 AI에 대해 잘아는건 아니지만) 노이즈를 제거하는 패턴을 학습시켜서 적은 스텝으로도 노이즈를 제거할 수 있도록하는 CM (Constistency Model)을 Stable Diffusion 에 맞게 Latent 영역에서 수행하도록 하는게 LCM이다.

※ 사용 방법은 아래와 같다.

- 사용 준비

● 현재 SD 1.5 용 체크포인트와 LoRA 를 사용하고 있는 경우 아래 2가지를 작업한다.
1. https://huggingface.co/latent-consistency/lcm-lora-sdv1-5 에서 LCM LoRA 를 받는다.
2. 프롬프트에 LCM LoRA 를 추가한다.

● LCM 용 체크포인트를 사용하는 경우에는 사전 준비할것이 없다. 가장 유명한 SD 1.5 LCM 용 모델인 DreamShaper 8 LCM 을 사용해도 좋다.

- 생성하기

1. Sampler 를 "LCM" 으로 변경한다.
4. CFG Scale 을 "2" 으로 변경한다.
5. Sampling steps 을 4 ~ 16 사이의 값으로 변경한다.
6. 생성 버튼 클릭

- 사용한 예

LCM LoRA 사용
사용자 삽입 이미지

미사용

사용자 삽입 이미지

생성한 파일

사용자 삽입 이미지

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - CivitAI 샘플 따라하기 - 글로잉 가운

AI로 그림그리는 실력을 늘이는데 필요한 것 중 하나가 바로 잘 그린 그림을 따라해보는 거라고 생각한다. CivitAI 에서 그림 감상중에 한 그림이 맘에 들어 따라해 보았다. 아래 이미지가 바로 그것.

사용자 삽입 이미지

프롬프트는 CivitAI 의 샘플 이미지와 같다. 재현은 잘 되었다. CivitAI 에 있는 그림과 거의 동일하다고 생각하기 때문이다. 사소한 디테일은 장비차이 때문이라고 치자. 내 방법대로 그리면 이런 그림은 안 나오기 때문에 조금 아쉽다. 위 그림을 생성하려면 반드시 xxmix9realistic_v40 체크포인트를 사용해야 하고, wrenchfaeflare LoRA 를 사용하면 쉽게 생성할 수 있다.

요즘의 SD 용 체크포인트는 적은 프롬프트를 사용해도 풍성하고 디테일 있는 그림을 얻을 수 있도록 튜닝되곤 한다. 이 그림도 마찬가지.

내 방법대로 그린 그림은 아래에 있다. 빛나는 이펙트가 많이 살아있지 않아서 아쉽지만 그럭저럭 봐줄만 하다.

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - 치파오

중국 전통의상중 하나. 한푸라는 단어를 사용하긴 하지만, 오래전부터 사용하던 단어는 아닌걸로 알고 있다. 치파오는 중국 만주족의 전통복식이기 때문에 이건 확실하게 중국 전통의상 이라고 할 수 있는데, 한푸라고 올라오는 AI가 생성한 의상들은 이게 중국 의상인지 혼동될때가 많다.

보통 중극 무협 드라마에서 배우들이 입은 의상이 한푸라고 하지만, 이건 송, 명, 고려의 의상을 혼합한 형식이 많으니 말이다. 특히 동아시아 복식은 송, 명, 만주 및 고려, 조선의 영향을 주거니 받거니 해서 서로 닮아있긴 하다.

미니 드레스로 생성했다. 치파오는 원래는 옆트임이 강한 긴 드레스다. 치파오 입고 말을 타야했으니 옆트임을 강하게 할 수 밖에 없다. 단 속에는 바지를 입었기 때문에 노출이 많은 의상은 아니었다.

사용자 삽입 이미지

치파오는 여인의 매력을 잘 어필할 수 있는 매력적인 의상이다. 여태까지 AI로 잘 생성하지 못하다가 괜찮은 LoRA 가 올라와 생성해 봤다.

사용자 삽입 이미지

주로 붉은색 치파오를 많이 입었지만, 파란색도 꽤 있었다고 한다. 노란색 의상은 AI 그 그렇게 생성했고 예쁘길래 그냥 넣어봤다.

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - 미녀 #5

미녀 다섯번째 포스트.

두개의 LoRA 와 자체 머지한 체크포인트를 사용해 만든 미녀. 기존과는 다른느낌을 주려고 노력했고, 결과적으로 턱을 조금 깎았다. 다른건 최대한 비슷하게 했다.

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전

Stable Diffusion - 빅토리아 의상 #1


CivitAI 에 빅토리아시대의 의상 LoRA 가 올라왔는데, 이걸 사용해서 생성했다. 동일하게 생성한건 아니고 내 식대로 변형을 가했다. 꽤 잘 나와서 올려본다.

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - 화염 #1

배경으로 화염을 그려주는 LoRA 를 사용했다. 하지만, 의도와는 조금 달라졌는데, LoRA 샘플에는 멋졌지만, 이건 어딘가 불을 지른 느낌의 화염이다.

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전

Stable Diffusion - 그리움 戀

우연히 음악 듣다가 "그리움"을 주제로 그릴 수 있지 않을까 하는 생각에 생성한 그림. 1100 여 장에서 31장 발췌했는데, 만족할만한 수준이 나와 올린다.그리움, 달빛, 바다, 은하수, 소녀가 키워드다.

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지


글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - 달빛, 바다, 은하수

달빛, 바다, 은하수를 주제로 생성한 사진은 아니고... 1girl 프롬프트가 적용되질 않았다. 1100여장중에 2장이 그렇다. 하지만, 맘에 들어 올려본다.

사용자 삽입 이미지

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - 미녀 #4

프롬프트 전면 교체까지는 아니어도 지난 번보다 많이 교체했다. LoRA 를 두개써서 만들었다. 나름 만족하게 되었다. 앞으로 이걸 기반으로 만들 생각.

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지
글쓴시간
분류 기술,IT/스테이블 디퓨전
Stable Diffusion - 드레스 롱 트레인

드레스 중에 롱 트레인(Long Train) 타입이 있다. 오랜 옛날에는 매우 예를 갖추어야 할 예식에 입는 옷이었다. 대관식이라던가 말이다. 요즘엔 입는 경우는 못봤고, 가끔 웨딩 드레스 중에 이런 롱 트레인 타입의 드레스가 있긴하다. 하지만 그걸 입는건 못 봤다. 롱 트레인 드레스를 쉽게 말하면 드레스 뒷자락을 매우 길게 늘여 만든 드레스다.

하지만 AI 로는 생성하기 어렵다. 트레인 이란 단어가 들어가기 때문에, 생성한 이미지에 기차가 나오기 때문이다. 현실에서 보기 어려운 드레스를 생성해내는게 내 목표이기도 하기 때문에 몇번 도전해봤는데 잘 안되었다. 하지만 오랜 시도끝에 드디어 되었다. 비슷한 LoRA 가 있길래 몇일 시행착오끝에 나온거다. 뭔가 오래묵은 과제 하나 해결한 후련한 느낌.

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지

사용자 삽입 이미지