(스테이블디퓨전) 슬램덩크 AI 실사 이미지 생성

스테이블 디퓨전에는 img2img 기능이 있다. 원본 이미지를 업로드한 후 원하는 사항을 입력하여 수정한 이미지로 변화하는 기능이다.

좋아하는 만화 슬램덩크의 캐릭터를 이 기능을 이용해서 실사 이미지를 뽑아주는 모델을 통한다면 실사화도 가능하지 않을까? 하는 생각이 들었다.
그래서 당장 실험에 들어가 보겠다.

강백호 원본 이미지

1. 첫 번째 시도
Models : ChilloutMix (여성화보 실사풍을 잘 뽑아내는 모델이라 과연 남성캐릭터를 잘 뽑아낼 것인가?)

음..... 실사화는 된 것 같은데... 역시나 이쁘게 나온다. 이 느낌은 아닌 것 같다.
2. 두 번째 시도
Models : perfectWorld (2D와 3D가 혼합된 느낌의 화풍을 뽑아주는 모델)

오 좀 괜찮은 느낌이 든다. 2D 기반이기에 완벽한 실사 화풍을 이용하기보단 3D와 2D가 혼합된 화풍을 써야 좀 더 자연스러운 화풍을 얻을 수 있었다. 그리고 여러 실험을 해보니 중요했던 게 Denoising Strength를 0.2~0.4 수준으로 낮게 잡아 최대한 원본이미지와 유사한 형태를 잡아줘야 했다.

서태웅 원본 이미지

자신이 붙었으니 최애캐릭터인 서태웅으로 마지막 도전을 해보았다.

3. 마지막시도(서태웅)
Models : perfectWorld (2D와 3D가 혼합된 느낌의 화풍을 뽑아주는 모델

처음 해보는 것 치고는 나쁘지 않은 것 같다. 좀 더 여러 개의 모델을 시험해보다 보면 최적의 조건을 찾을 수 있을 것 같다.

이번엔 시험 작업에 너무 시간이 걸렸으니 좀 더 공부 후에 img2img 기능과 함께 다른 특수 기능들도 한번 사용해 보고 간단한 사용법을 올려보겠다.