Stable Diffusion - LoRA 사용방법

Stable Diffusion - LoRA  사용방법

 

 로라( LoRA) 란

LoRA 란 기존 모델에 새로운 피사체를 학습시키는 기법입니다. 

좀 더 구체적으로 야기하면   Stable Diffusion의 특정 학습모델을 사용하여 이미지를 생성한 후 LoRa 모델을 한 번 더 적용하여 새로운 풍 이미지를 생성합니다.

 

 

1.LoRA  사용을 위한 환경 설정

 

먼저 아래 사이트에서 로라 파일을 다운로드 합니다.

(lora 로 검색하면 다양한 로라 파일을 확인 할 수 있습니다.)

https://civitai.com/models/6526/studio-ghibli-style-lora

Studio Ghibli Style LoRA | Stable Diffusion LORA | Civitai

 

다운로드가 완료되면 아래경로에 파일을 넣어 줍니다.

• PC : 스테이블티뷰전 설치경로/stable-diffusion-webui/models/lora/
• 코랩 : sd/stable-diffusion-webui/models/lora/
  
  

2.LoRA  사용하기

1) 아래 이미지와 같이 txt2img 기능을 사용해서 이미지를 생성 해봅니다.

2) Send to img2img  버턴을 클릭합니다.

3) 로라 설정을 위해서 달광(show extra networks) 모양을 클릭합니다.

 

 

4)  Lora  탭 아래에 있는 studioGhibliStyle_offset 클릭합니다.

5) img2img  프롬프트에  <lora:studioGhibliStyle_offset:1>   로라가 추가된것을 확인 할 수 있습니다.

※ 로라파일이 여러개인중어 offset:1 부분의 가중치를 조정하여 설정 할 수 있습니다.

ex)  <lora:studioGhibliStyle_offset:0.6> <lora:fashionGirl_v51:0.4>

6) Generate  버턴을 클릭하면 해당 이미지가 지브리 스타일로 변경되어 생성됩니다.