카테고리 없음

ComfyUI 사용하기2

왕초보코딩러 2024. 10. 1. 18:28
728x90

사용하기

Stable diffusion 생성형 이미지 모델을 공유하는 오픈 소스 사이트입니다.

https://civitai.com/models

 

Civitai | Share your models

 

civitai.com

 

 

 

여기서 checkpoint과 lora 하나씩 받아주겠습니다(동일한 Base model로)

 

저는 Stable Diffusion XL 1.0을 Base model로 한 모델들을 다운 받았습니다.

https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0

 

stabilityai/stable-diffusion-xl-base-1.0 · Hugging Face

SD-XL 1.0-base Model Card Model SDXL consists of an ensemble of experts pipeline for latent diffusion: In a first step, the base model is used to generate (noisy) latents, which are then further processed with a refinement model (available here: https://hu

huggingface.co

 

https://civitai.com/models/161068/stoiqo-newreality-or-flux-sd-xl-lightning?modelVersionId=690310

 

🟡 STOIQO NewReality | FLUX, SD, XL, Lightning - 🔝🔵 XL PRO | Stable Diffusion Checkpoint | Civitai

Hello everyone. The new version of NewReality has finally come out, but I'm still in an experimental phase regarding Flux. It's taking longer and m...

civitai.com

 

https://civitai.com/models/600793/aura-fluxsdxlpony?modelVersionId=671502

 

Aura - Flux/SDXL/Pony - V1 SDXL | Stable Diffusion LoRA | Civitai

This model is designed to add a dynamic aura effect to objects and beings, utilizing three distinct types of auras that can be triggered using spec...

civitai.com

 

 

 

이 다운받은 모델들을

Comfy_windows_portable > ComfyUi > models

안에

checkpoints와 loras 폴더에 각각 저장해줄 것 입니다.

 

모델을 넣고 ComfyUI 사이트를 새로고침 하면

제가 다운 받은 모델이 들어가 있습니다.


 

1. 체크 포인트 사용하기

 

일단 모두 default로 하고 사용해보겠습니다.

 

원하는대로 프롬프트와 옵션을 바꾸고 오른쪽의 Queue Prompt를 눌러줍니다

Hamtaro, with a massive, glowing mythical sword in one hand and an intricately designed shield in the other.

 

steps를 10으로 줄여보겠습니다. 빨리 되었지만 품질은 떨어집니다.

 

 

결과는 

Comfy_windows_portable > ComfyUi > output에 저장됩니다.

 

 


2. 로라 사용하기

ComfyUI의 빈칸을 더블 클릭하면 노드를 추가할 수 있습니다.

 

lora를 검색하고 Load LoRA 클릭

 

이제 노드의 간선을 바꿔줍니다

원래

Load Checkpoint의 MODEL output ->  KSampler의 MODEL input

Load Checkpoint의 CLIP output -> CLIP Text Encode (Prompt) 두 개의 clip input

 

Lora를 넣고

Load Checkpoint의 MODEL output -> Load LoRA의 MODEL input

Load Checkpoint의 CLIP output -> Load LoRA의 CLIP input

Load LoRA의 MODEL output -> KSampler의 MODEL input

Load LoRA의 CLIP output -> CLIP Text Encode (Prompt) 두 개의 clip input

 

 

제가 저장한 LoRA 모델은 "fire" 키워드가 있어서 fire을 넣어서 프롬프트를 작성했습니다.

 

fire Hamtaro, with a massive, glowing mythical sword in one hand and an intricately designed shield in the other.


이제 제가 만든 노드들을 저장해보겠습니다

오른쪽에 Save를 누르면 json 형식으로 저장이 됩니다.

 

이런 식으로 저장이 됩니다.

 

부를 때는 Load를 클릭하고 만든 json을 불러오면 됩니다.