step1. 컴퓨터 사양 상관없는 AI 그림 자동 생성, WebUI 사용법 및 설치 방법 (코랩 colab 활용방법)
컴퓨터 사양 상관없는 AI 그림 자동 생성, WebUI 사용법 및 설치 방법 (코랩 colab 활용방법)
컴퓨터 사양이 좋지 않은데 할 수 있나요? 컴퓨터 사양이 좋지 않아도 인공지능을 활용한 그림을 만들 수 있습니다. 원래 stable diffusion Web Ui를 이용한 AI 그림은 좋은 성능의 그래픽을 요구하지만
helloagain11.com
앞에서 stable diffusion WebUi를 설치했다면, 이번에는 ai 학습 모델을 통해 고품질의 그림을 얻는 방법에 대해 알아보겠습니다. 학습 모델은 크게 실사 풍의 이미지를 지원하는 ChilloutMix 그리고 애니풍의 OrangeMix가 있습니다.
대표적인 학습모델 종류
ChilloutMix(ai 그림 사이트)
실사풍의 그림체를 원할 때 쓰는 AI 학습 모델입니다. (다른 사람들이 여러 학습 모델로 그려놓은 ai 실사 사진 공유 )
https://civitai.com/models/6424/chilloutmix
ChilloutMix - Chilloutmix-Ni-pruned-fp32-fix | Stable Diffusion Checkpoint | Civitai
This model has been republished and its ownership transferred to Civitai with the full permissions of the model creator. They have asked that all i...
civitai.com
OrangeMix
애니메이션 그림체를 원할 때 쓴는 AI 학습모델입니다.
Models/AbyssOrangeMix2/AbyssOrangeMix2_hard.safetensors · WarriorMama777/OrangeMixs at main
Git LFS Details SHA256: 0fc198c4908e98d7aae2a76bd78fa004e9c21cb0be7582e36008b4941169f18e Pointer size: 135 Bytes Size of remote file: 5.57 GB Git Large File Storage (LFS) replaces large files with text pointers inside Git, while storing the file contents o
huggingface.co
이 중에서 원하시는 그림에 맞는 학습 모델을 다운받으시면 됩니다. 저 같은 경우는 예시를 위해 둘다 다운 받았습니다.
일단 학습 모델을 둘다 다운 받았다면, 스테이블 디퓨전이 학습 모델을 인지할 수 있게끔 구글 드라이브안에 있는 특정 폴더에 넣어주어야 합니다.
누구라도 한번쯤 stable diffusion을 실행시켜봤다면, 구글 드라이브안에 다음와 같이 sd폴더가 있을 것입니다. 여기를 경로로 아래 sd 폴더-> stable-diffusion-webui - > models -> Stable-diffusion 를 들어가시면
다음과 같이 나오는데 여기에 다운받은 ChilloutMix와 OrangeMix 파일을 넣어주시면 됩니다. 학습 모델 용량이 큰 편이라 업로드 하는데 시간이 좀 걸릴 수 있습니다.
아래와 같이 chilloutMix 파일이 잘 들어갔나요? 일단 chilloutmix 학습모델 파일을 하나만 넣었는데 그 이유는 구글 드라이브 무료 제공 용량이 15G이기 때문에 두개 이상 학습모델을 넣으면 구글 드라이브 용량이 넘칠 수 있기 때문입니다. 처음 하시는 분들은 실사판 먼저 학습모델로 사용해보시고, 여러 학습 모델을 넣고 싶으신 경우 Google 드라이브저장 용량 구매를 통해 늘리실 수 있습니다.
VAE (화질 개선 용)
VAE는 쉽게 이미지를 부드럽고 선명하게 보정처리 한다고 생각해 주시면 됩니다. VAE는 대표적으로 실사 그림체에서 사용되는 vae-fe-mse-840000-ema 그리고 애니용 kl-f8-anime2가 있습니다. 오늘은 실사용 vae-fe-mse-840000-ema만 하겠습니다.
vae-ft-mse-840000-ema-pruned.ckpt · stabilityai/sd-vae-ft-mse-original at main
Detected Pickle imports (4) "torch._utils._rebuild_tensor_v2", "torch.IntStorage", "torch.FloatStorage", "collections.OrderedDict" What is a pickle import?
huggingface.co
또 이제 AI 이미지를 생성하다보면 반점이 생긴다던지, 화질에 문제가 있을 수 있기 때문에 이를 개선하기 위해 위에 VAE 파일을 다운 받아줍니다.
그리고 다운받은 VAE 파일을 구글 드라이브 경로에 넣어주시면 됩니다.sd -> stable-diffusion-webui -> models -> VAE
이제 다시 스테이블 디퓨전 webui를 실행해볼텐데요. 아래 내 구글 드라이브에서 동그라미친 아이콘을 클릭하면 빠르게 stable diffusion을 실행할 수 있습니다.
이제 시간이 지났기 때문에 맨아래 링크를 클릭해도 안될 텐데요.. 구글 코랩을 이용한 실행은 일정 시간이 지나면 자동으로 로그아웃되기 때문에 다시 처음부터 실행버튼을 차근차근 눌러주세요..(이러한 번거로움이 구글 코랩의 단점이지만, 전 그래도 무료로 고퀄 그림을 만들 수 있어서 만족합니다. ㅜㅜ)
이제 다시 스테이블 디퓨젼 실행 링크를 클릭한 뒤 아래 창이 뜨면 각각 아래와 같이 해주시면됩니다. 그다음 VAE를 적용하기 위해 Settings -> stable diffusion -> SD VAE에서 다운받은 vae-fe-mse-840000-ema로 바꿔주시고, 마지막으로 Apply settings 눌러주시면 됩니다.
그리고 stable diffusion checkpoint에서 학습모델을 chilloutmix로 변경 VAE도 마찬가지로 변경해주세요.
이제 모든 세팅이 완료 됐으면 실습을 해볼까요? 아래 civitaAi 사이트에서 마음에 드는 사진을 클릭해 봅니다.
사진을 무작위로 클릭한 뒤 오른쪽에 보시면, 해당 이미지를 생성하기 위해 사용한 긍정 프롬프트와 부정 프롬프트(원하지 않는 내용)가 나와있어요. 이를 그대로 붙여넣기 해도되고 해당 프롬프트를 활용하여 원하시는 그림을 얻을 수 있습니다.
