챗 GPT 처럼 인공지능이 그린 그림 ( WebUI 스테이블 디퓨전)

챗 GPT 처럼 인공지능이 그린 그림 ( WebUI 스테이블 디퓨전)

챗 gpt가 워낙 이슈라 인공지능이 못하는게 없는 세상일거라 생각했지만, 인공지능이 그림을 그려 준다니 참 신기하다. 

이번에는 WebUI가 그림을 만화스타일로 그려주는 방법에 대해 알아보도록 하자.

 

WebUI로 그림을 따라그리는 방법이 궁금하다면 아래 포스팅을 참고하길 바람.

WebUI 설치 및 사용방법(AI 그림)

 

우선 어떤 그림이 그려지는지 결과부터 확인해 보자. 아래와 같은 그림을 그려달라고 해봤는데 

사무실에서 컴퓨터 작업을 하는 동안 웃고 있는 젊은 여성, 검은 포니테일 머리와 모자 모자, 태양 그림이 있는 벽, 태양 모양 목걸이

 

 

 

결과물이 영 이상하다.

 

어느정도 퀄리티 있는 모양을 만들어 주기 위해서 만화 스타일로 그림을 그려줄 수 있는 새로운 모델을 다운받아 실행해 봄. 결과물을 먼저 확인해 보자

오토바이를 타고 있는 모습을 그림을 그려달라고 부탁하니 아래와 같은 그림이 나온다. 훨씬 낫네. 

사람이 그려도 이것보다 잘 그리기 힘들거 같기도 하고, 인공지능 AI 대단하다. 챗 gpt도 대단했는데 스테이블 디퓨전도 대단하네. 

 

만화스타일로 인공지능한테 그림을 그려달라고 하기 위해서 먼저 WebUI를 종료한 후(CMD 창 꺼야함)

그리고 아래 순서로 차근차근 따라해 주기 바란다.

 

Pastel-Mix 다운 받기

위 링크의 Pastel-Mix로 들어가서 Download Latest 우측의 화살표 버튼을 누른 후 Model SafeTessor, VAE를 클릭해 받아야 한다. 

 

이후 다운로드 받은 파일은 아래의 경로에 넣어주면 된다. 

간단히 설명하자면 모델파일은  Stable-diffusion에, VAE는 VAE폴더에 넣어주는 것이다. 

주기적으로 모델과 VAE가 업데이트되기 때문에 이름이 다르더라도 해당 경로에만 넣어주면 재대로 동작하니 걱정하지 않아도 된다. 

• pastelMixStylizedAnime_pastelMixPrunedFP16.safetensors  - > C:\stable-diffusion-webui\models\Stable-diffusion
• pastel-waifu-diffusion.vae.pt -> C:\stable-diffusion-webui\models\VAE

 

 

Pastel-Mix 적용해서 실행하기

다운이 완료되면 다시 Stable-diffusion-webui 폴더에서 webui-user.bat 를 실행해 주자. 

 

To create a public link가 활성화된 걸 확인한 후 http://127.0.0.1:7860/ 링크로 접속하면 다시 접속이 된다. 

 

Stable Diffusion checkpoint를 아까 다운로드 받은 pastelMixStylizedAnime_pastelMixPrunedFP16.safetensors 로 변경해주면 된다. 

 

변경하면 선택창이 빈 칸이 되는데 로딩하는 중이라 그렇게 뜨는 거고 2분 정도 기다려주면 이미지와 같이 Stable Diffusion이 변경된다.

 

다음은 Settings 탭으로 이동한 후 왼쪽의 Stable Diffusion을 누르고 SD VAE 항목을 클릭해 아까 다운로드 받은 pastel-waifu-diffusion.vae.pt 로 설정하고 위에 보이는 Apply settings을 눌러주자.

 

다시 text2img 으로 돌아와서 상세설정을 아래와 같은 권장사항으로 맞춰준다. 

 

mksks style 을 맨 앞에 추가해 준다 (해당 모델에서 권장하는 옵션임)

아까 처음에 사용했던, Smiling young woman sticking out her tongue while working on a computer in an office, black ponytail hair and cap hat, a wall with a painting of the sun, sun shape necklace

로 다시 우측에 Generate를 눌러 생성을 해 보도록 하자. 

 

결론은 정리해 보자면 Civitai에서 필요한 Model과 VAE를 받아준 후 (VAE는 없을 수도 있음) WebUI에 적용시킨 후 Generate 시키면 원하는 타입의 AI 이미지를 생성할 수 있다.