DMD2 Speed LoRA [SDXL, Pony, Illustrious] - dmd2_sdxl_4step_lora_fp16
๊ด๋ จ ํค์๋ ๋ฐ ํ๊ทธ
์ถ์ฒ ๋ค๊ฑฐํฐ๋ธ ํ๋กฌํํธ
NSFW, naked, nude, watermark, text, simple background
์ถ์ฒ ๋งค๊ฐ๋ณ์
samplers
steps
cfg
other models
ํ
๋ ๋์ ์ฑ๋ฅ์ ์ํด fp32์ fp16 LoRA๋ฅผ ๊ฐ๊ฐ 0.5 ๊ฐ์ค์น๋ก ๊ฒฐํฉํด ๋ณด์ธ์.
LoRA ๊ฐ์ค์น๋ ๋๋ต 0.7์ ์ฌ์ฉํ๋, 1.0์ ๊ฐ์ค์น๋ ์ข์ ๊ฒฐ๊ณผ๋ฅผ ๋ณด์ฌ์ค๋๋ค.
์ด๋ฏธ์ง๊ฐ ํ๋ฆฌ๊ฑฐ๋ ์ฑ๋๊ฐ ๋ฎ์ ๋ณด์ด๋ฉด CFG ๊ฐ์ ์ฌ๋ ค ๋ณด์ธ์.
LoRA๋ ์์ฒด์ ์ผ๋ก ์๋ ๊ฐ์ ์ ์ ๊ณตํ์ง ์์ผ๋ฉฐ, ์ ์ ๋จ๊ณ๋ก ์์ฑํ ์ ์๊ฒ ํด์ค๋๋ค.
LoRA๋ฅผ ์ฒดํฌํฌ์ธํธ์ ๋ณํฉํ๋ฉด LoRA๋ฅผ ๋ฐ๋ก ๋ก๋ํ์ง ์๊ณ ๋ ๊ฒฐ๊ณผ๋ฅผ ๋ฐ๋ก ์ฌ์ฉํ ์ ์์ต๋๋ค.
๋ฒ์ ํ์ด๋ผ์ดํธ
dmd2_sdxl_4step_lora_fp16
์ด๊ฒ์ ํฅ์๋ ๋น ๋ฅธ ์ด๋ฏธ์ง ํฉ์ฑ์ ์ํ ๋ถํฌ ๋งค์นญ ์ฆ๋ฅ(Distribution Matching Distillation) ๋ ผ๋ฌธ์ ๊ณต์ DMD2 ๊ตฌํ LoRA์ ๋๋ค.
dmd2_sdxl_4step_lora
์๋ณธ ๋ชจ๋ธ์ Huggingface tianweiy/DMD2์ ์์ต๋๋ค.
๊ถ์ฅ ์ค์
๋จ๊ณ: 8
LoRA ๊ฐ์ค์น: 0.7
์ํ๋ฌ: LCM
์ค์ผ์ค๋ฌ: Normal, Simple
CFG: 1.4 - 1.8
์ ๋ ์ ํด์๋ ๊ธฐ๋ฐ ์ด๋ฏธ์ง์ ์ ์ค์ผ์ผ๋ง ํ ์ ์ ์์ (hires fix) ๋ชจ๋์ ์ ์ฌํ ์ค์ ์ ์ฌ์ฉํฉ๋๋ค. ์ ์ค์ ์ ์ ์ ๊ฐ์ธ์ ์ธ ๊ถ์ฅ์ฌํญ์ด๋ฉฐ, ์ฌ๋ฌ๋ถ์ ๋ชจ๋ธ๊ณผ ํจ๊ป ๊ฐ์ฅ ์ ๋ง๋ ์ค์ ์ ์ฐพ๊ธฐ ์ํด ๋ค์ํ ์ต์ ์ ์๋ํด ๋ณด์๊ธธ ๊ถํฉ๋๋ค.
๋ LoRA ๊ฒฐํฉํ๊ธฐ
fp32์ fp16์ ๊ฐ๊ฐ ๊ฐ์ค์น 0.5๋ก ๋์์ ์ฌ์ฉํ๋ ๊ฒ์ด ๋ ์ข์ ์ฑ๋ฅ์ ๋ธ๋ค๋ ๋ณด๊ณ ๋ ์์ต๋๋ค.
๊ถ์ฅ LoRA ๊ฐ์ค์น
๋ค๋ฅธ LoRA์ฒ๋ผ ๋ก๋ํ์๋ฉด ๋ฉ๋๋ค. ์ ๋ ๊ฐ์ธ์ ์ผ๋ก 0.7์ ๊ฐ์ค์น๋ฅผ ์ถ์ฒํ์ง๋ง, 1.0์ด ๋ ๋ซ๋ค๊ณ ์ฃผ์ฅํ๋ ๋ถ๋ค๋ ์์ต๋๋ค.
์ฌ์ฉ๋ฒ
์ด๋ค SDXL ๋๋ ์ ์ฌํ ์ฒดํฌํฌ์ธํธ์๋ ์ฌ์ฉํ ์ ์์ผ๋ฉฐ ์ ์ค์ ์ ํ์ฉํ์ธ์.
๋ํ ์ด LoRA๋ฅผ ์ฒดํฌํฌ์ธํธ์ ๋ณํฉํ์ฌ ์ ์ฅํ๋ฉด, LoRA๋ฅผ ๋ณ๋๋ก ๋ก๋ํ์ง ์๊ณ ๋ ๊ฒฐ๊ณผ๋ฅผ ํฌํจํด ์ง์ ์ฌ์ฉํ ์ ์์ต๋๋ค. ์ด๋ ๊ฒ ํ๋ฉด LCM ๋ฐ ์ ์ ๋จ๊ณ๋ก๋ ์ข์ ๊ฒฐ๊ณผ๋ฅผ ์ป์ ์ ์์ต๋๋ค.
LoRA ์์ฒด๋ ์๋ ํฅ์์ ์ ๊ณตํ์ง ์๊ณ , ๋ ์ ์ ๋จ๊ณ๋ก ๋ ๋์ ๊ฒฐ๊ณผ๋ฅผ ์์ฑํ ์ ์๊ฒ ํฉ๋๋ค.
๊ฒฐ๊ณผ๋ฌผ์ด ํ๋ฆฌ๊ฑฐ๋ ์์ด ๋น ์ ธ ๋ณด์ธ๋ค๋ฉด CFG ๊ฐ์ ๋์ฌ ๋ณด์ธ์.
๋ผ์ด์ ์ค
Creative Commons Attribution Non Commercial 4.0
์ ๋ ์ด ๋ชจ๋ธ์ ์ ์์๊ฐ ์๋๋ฉฐ, ๋ค์ด๋ก๋์ ์ฐฝ์์ ์ฐธ๊ณ ํ๊ธฐ ์ฝ๊ฒ ์ ๋ก๋ํ ๊ฒ๋ฟ์ ๋๋ค. ๋ชจ๋ ๊ณต์ Tianwei Yin์๊ฒ ๋์๊ฐ๋๋ค.
๋ชจ๋ธ ์ธ๋ถ์ฌํญ
๋ชจ๋ธ ์ ํ
๊ธฐ๋ณธ ๋ชจ๋ธ
๋ชจ๋ธ ๋ฒ์
๋ชจ๋ธ ํด์
์ ์์
ํ ๋ก
๋๊ธ์ ๋จ๊ธฐ๋ ค๋ฉด log inํ์ธ์.








