ํ”ผ๋ถ€์— ์‚ฌ์‹ค์ ์ธ ์–ผ์–ด๋ถ™์€ ์งˆ๊ฐ๊ณผ ๊ธˆ์† ๊ฐ™์€ ์–ผ์Œ ์š”์†Œ๊ฐ€ ์žˆ๋Š” ์—ฌ์„ฑ์˜ ์ดˆ์ƒํ™”, ์˜ํ™” ๊ฐ™์€ ์กฐ๋ช…๊ณผ ์„ ๋ช…ํ•œ ๋””ํ…Œ์ผ๋กœ ๋ Œ๋”๋ง๋จ.
ํŒŒ๋ž€ ๋ณด์„์ด ๋ฐ•ํžŒ ํ™ฉ๊ธˆ ์™•๊ด€์„ ์“ฐ๊ณ  ๊ฝƒ ์žฅ์‹๊ณผ ์šฐ์•„ํ•œ ๋ณด์„์ด ๋‹ฌ๋ฆฐ ๋นˆํ‹ฐ์ง€ ํŒŒ๋ž€์ƒ‰๊ณผ ํฌ๋ฆผ์ƒ‰ ๋“œ๋ ˆ์Šค๋ฅผ ์ž…์€ ๊ธด ์›จ์ด๋ธŒ ๊ฐˆ์ƒ‰ ๋จธ๋ฆฌ์˜ ์ Š์€ ์—ฌ์„ฑ ์ดˆ์ƒํ™”.
๋น›๋‚˜๋Š” ๊ฒ€์ •์ƒ‰ ๋ฃจ๋ฉ”๋‚˜๋ฆฌ์›€ ๋น„ํ–‰์„ ์ด ๋ณด๋ž๋น› ์ดˆ์Šน๋‹ฌ ์•„๋ž˜ ํญํฌ๊ฐ€ ์žˆ๋Š” ์šธ์ฐฝํ•œ ํ˜‘๊ณก ์œ„๋ฅผ ๋ฏธ์Šคํ‹ฑํ•œ ๋‹ฌ๋น›์— ๋น„์ณ ๋จผ ๊ณณ์— ํƒ‘ ๋„์‹œ๊ฐ€ ๋ณด์ด๋Š” ๋ชจ์Šต
์ธ์ƒ์ ์ธ ๋นจ๊ฐ„ ๋“œ๋ ˆ์Šค์™€ ์„ ๊ธ€๋ผ์Šค๋ฅผ ์ฐฉ์šฉํ•œ ์„ธ๋ จ๋œ ์—ฌ์„ฑ์ด ๊ณตํ•ญ ํ„ฐ๋ฏธ๋„์— ์ž์‹ ๊ฐ ์žˆ๊ฒŒ ์„œ ์žˆ์œผ๋ฉฐ, ์ˆ˜ํ•˜๋ฌผ ์นดํŠธ ์œ„์— ์Œ“์ธ ๋‹ค์ฑ„๋กญ๊ณ  ํ˜ผ๋ž€์Šค๋Ÿฌ์šด ์ˆ˜ํŠธ์ผ€์ด์Šค ๋”๋ฏธ๋กœ ๋‘˜๋Ÿฌ์‹ธ์—ฌ ์žˆ๋Š” ์‚ฌ์ง„์ฒ˜๋Ÿผ ์‚ฌ์‹ค์ ์ธ ์ด๋ฏธ์ง€.
๋™์•„์‹œ์•„ ์ „ํ†ต ๊ฑด์ถ•๊ณผ ๋ฌด์„ฑํ•œ ๋‚˜๋ฌด๋“ค์ด ๋‘˜๋Ÿฌ์‹ผ ์ข๊ณ  ๋ฌผ์ด ๊ฐ€๋“ํ•œ ๊ธธ์— ํ™€๋กœ ์„œ ์žˆ๋Š” ๋ฐฉ๋ž‘์ž, ๋”ฐ๋œปํ•œ ์ผ๋ชฐ ๋น›์ด ๋ฉ€๋ฆฌ ์žˆ๋Š” ์‚ฐ๋“ค์„ ๋น„์ถ”๊ณ  ์žˆ๋‹ค.
์ž”์ž”ํ•œ ๋ฐ”๋‹ค ๋ฌผ๊ฒฐ์ด ์ˆ˜ํ‰์„ ๊นŒ์ง€ ์ด์–ด์ง€๋Š” ๋ชจ์Šต์„ ๋‚ด๋ ค๋‹ค๋ณด๋Š” ๋งค๋„๋Ÿฌ์šด ๊ณก์„  ๋””์ž์ธ์˜ ํ˜„๋Œ€ ๋ชฉ์กฐ๊ฑด์ถ• ๊ตฌ์กฐ๋ฌผ.
๋ง‘์€ ํŒŒ๋ž€ ํ•˜๋Š˜๊ณผ ๊ตฌ๋ฆ„ ์•„๋ž˜ ๊ณ ์ธต ๊ฑด๋ฌผ๋“ค๋กœ ๊ฐ€๋“ํ•œ ๋„์‹œ๋ฅผ ๊ณต๊ฒฉํ•˜๋Š” ๋‚ ์นด๋กœ์šด ์ด๋นจ๊ณผ ํ™”๋‚œ ๋ˆˆ์„ ๊ฐ€์ง„ ๊ฑฐ๋Œ€ํ•˜๊ณ  ์œ„ํ˜‘์ ์ธ ํ† ๋งˆํ† , ์ฃผ๋ณ€์—๋Š” ๋” ์ž‘์€ ํ† ๋งˆํ† ๋“ค๊ณผ ๋ฌด์„ฑํ•œ ๋…น์ƒ‰ ์žŽ๋“ค์ด ๋‘˜๋Ÿฌ์‹ธ์—ฌ ์žˆ์Šต๋‹ˆ๋‹ค.
์–ด๋‘์šด ๋ฐฐ๊ฒฝ์— ์ƒ์ƒํ•˜์ง€๋งŒ ์˜ค์‹นํ•œ ์กฐ๋ช…์ด ๋น„์น˜๋Š”, ํŽผ์ณ์ง„ ๊ณ ๋Œ€ ์ฑ… ์œ„์— ๋ฐฐ์—ด๋œ ์ง™์€ ๋ถ‰์€ ์žฅ๋ฏธ์™€ ๊ฒ€์€ ๊นƒํ„ธ.
์–ด๋‘์šด ๋ฐฐ๊ฒฝ ์†์—์„œ ๋น›๋‚˜๋Š” ๋ณ„๊ณผ ๋ถˆ์ด ์–ด์šฐ๋Ÿฌ์ง„ ์ƒ์ƒํ•œ ์ˆ˜์ • ๊ฝƒ๋ด‰์˜ค๋ฆฌ, ์„ธ๋ฐ€ํ•œ ๋””ํ…Œ์ผ๊ณผ ๋ถ„์œ„๊ธฐ ์žˆ๋Š” ์กฐ๋ช…์ด ํŠน์ง•์ž…๋‹ˆ๋‹ค.
ํŒŒ๋ž€ ๋“œ๋ ˆ์Šค๋ฅผ ์ž…๊ณ  ๊ธด ์–ด๋‘์šด ๋จธ๋ฆฌ๋ฅผ ํ•œ ์—ฌ์„ฑ์ด ์•ˆ๊ฐœ ๋‚€ ํํ—ˆ๊ฐ€ ๋œ ์ˆฒ ํ’๊ฒฝ์˜ ํƒ€์ผ ์ฒด์ŠคํŒ ์œ„์—์„œ ๊ฑฐ๋Œ€ํ•œ ๋‚ก์€ ์ฒด์Šค ๋ง์„ ํ–ฅํ•ด ๊ฑท๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.
๊ฑฐ๋Œ€ํ•œ, ๊ดด๋ฌผ ๊ฐ™์€ ๋‘๊บผ๋น„๊ฐ€ ์ •๊ตํ•œ ์งˆ๊ฐ์˜ ํ”ผ๋ถ€์™€ ๋ณต์žกํ•œ ๊ธˆ์ƒ‰ ์–‘์„œ๋ฅ˜ ๋ˆˆ์„ ๊ฐ€์ง„ ์ฑ„ ํ™ฉ๊ธˆ ๋™์ „๊ณผ ๋ณด๋ฌผ ๋”๋ฏธ ์œ„์— ์‰ฌ๊ณ  ์žˆ์œผ๋ฉฐ, ๊ทธ ๋“ฑ์—๋Š” ์ž‘์€ ๋‘๊บผ๋น„๋“ค์ด ์žˆ๊ณ  ์–ด๋‘์šด ํŒํƒ€์ง€ ๋ฐฐ๊ฒฝ์— ๋น›๋‚˜๋Š” ๋ณด๋ฆ„๋‹ฌ ์•„๋ž˜์— ์žˆ์Œ.
ํ‚ค๊ฐ€ ํฐ ๊ฑด๋ฌผ๋“ค, ์ –์€ ๋„๋กœ ์œ„์˜ ๋งŽ์€ ๊ตํ†ต, ์ƒ์„ธํ•œ ๋„์‹œ ์ธํ”„๋ผ๊ฐ€ ์žˆ๋Š” ๋ฏธ๋ž˜์ ์ธ ์‚ฌ์ด๋ฒ„ํŽ‘ํฌ ๋„์‹œ์˜ ํ‘๋ฐฑ ์Šค์ผ€์น˜์ž…๋‹ˆ๋‹ค.

์ถ”์ฒœ ๋„ค๊ฑฐํ‹ฐ๋ธŒ ํ”„๋กฌํ”„ํŠธ

blurry

์ถ”์ฒœ ๋งค๊ฐœ๋ณ€์ˆ˜

samplers

DPM++ 2M Karras, DPM++ SDE Karras

steps

35 - 55

cfg

4.5 - 7.5

clip skip

2

resolution

888x1152, 1160x1696, 832x1216

vae

SDXL-VAE_0.9.safetensors (63aeecb90f)

other models

FaeTasticSDXL2400------7071----- (603b6d615a), FaeTasticSDXL2400 (32c407e03f)

์ถ”์ฒœ ๊ณ ํ•ด์ƒ๋„ ๋งค๊ฐœ๋ณ€์ˆ˜

denoising strength

0.3 - 0.4

ํŒ

์ด ๋ชจ๋ธ์€ A1111์˜ SuperMerger์™€ Kohya๋กœ ํ›ˆ๋ จํ•œ ์—ฌ๋Ÿฌ ์‚ฌ์šฉ์ž ์ •์˜ LoRA๋ฅผ ๋ณ‘ํ•ฉํ•ฉ๋‹ˆ๋‹ค.

๋ฆด๋ฆฌ์Šค๋Š” ์˜คํ”ˆ ์†Œ์Šค ์›์น™์„ ๋”ฐ๋ฅด์ง€๋งŒ, ํ—ˆ๊ฐ€ ์—†์ด ์ œ3์ž ์ƒ์„ฑ ์‚ฌ์ดํŠธ์—์„œ ๊ธˆ์ „์ ์œผ๋กœ ์ด์šฉ๋˜๋Š” ๊ฒƒ์—๋Š” ๋ฐ˜๋Œ€ํ•ฉ๋‹ˆ๋‹ค.

SDXL LoRA ํ›ˆ๋ จ์— ๋Œ€ํ•ด ์ €์ž๋Š” https://civitai.notion.site/SDXL-1-0-Training-Overview-4fb03d5b4cbf482ebe13ffef7bcb8ead ์˜ ๊ฐ€์ด๋“œ๋ฅผ ์ถ”์ฒœํ•ฉ๋‹ˆ๋‹ค.

์ €์ž๋Š” Civitai ๋””์Šค์ฝ”๋“œ์—์„œ ์ง€์›์„ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค.

๐Ÿฅ‚๐ŸŽ†์ƒˆํ•ด ์—๋””์…˜๐ŸŽ†๐Ÿฅ‚

์ƒ์„ฑ๊ธฐ ๋ฌธ์ œ๋กœ ์ˆ˜์ •๋œ ์ฒดํฌํฌ์ธํŠธ๋ฅผ ์—…๋ฐ์ดํŠธํ•˜์—ฌ ๋ฒ„์ „์„ ๋‹ค์‹œ ์—…๋กœ๋“œํ•  ํ•„์š”๊ฐ€ ์žˆ์—ˆ์Šต๋‹ˆ๋‹ค. ์ง€๋‚œ ๋ฉฐ์น ๊ฐ„ ์—…๋กœ๋“œ๋œ ๋™์ผํ•œ ๋ฒ„์ „์ด๋ฏ€๋กœ ์ด๋ฏธ ๋‹ค์šด๋กœ๋“œํ–ˆ๋‹ค๋ฉด ๋‹ค์‹œ ๋ฐ›์„ ํ•„์š”๋Š” ์—†์Šต๋‹ˆ๋‹ค. ์žฌ๋ฏธ๋กœ ๋ช‡ ๊ฐ€์ง€ ์ƒˆ ์ด๋ฏธ์ง€๋„ ์ถ”๊ฐ€ํ–ˆ์Šต๋‹ˆ๋‹ค.

์ง€๋‚œ ๋ช‡ ์ฃผ ๋™์•ˆ ์ด ๋ชจ๋ธ์„ ์ž‘์—…ํ•ด ์™”์œผ๋ฉฐ, ๊ณต๊ฐœํ•˜๊ธฐ์— ๋งŒ์กฑ์Šค๋Ÿฌ์šด ์ˆ˜์ค€์— ์ด๋ฅด๋ €๋‹ค๊ณ  ์ƒ๊ฐํ•ฉ๋‹ˆ๋‹ค. 1.5 FaeTastic์˜ ์ƒ‰์ƒ๊ณผ ์ฐฝ์˜์„ฑ์„ ๊ฐ–์ถ”๊ณ  SDXL์˜ ๋ฌธ์ œ์ ์„ ์ผ๋ถ€ ์ˆ˜์ •ํ•˜๋ ค๊ณ  ํ–ˆ์Šต๋‹ˆ๋‹ค. ์™„๋ฒฝํ•˜๋‹ค๊ณ ๋Š” ์•ฝ์†ํ•  ์ˆ˜ ์—†์ง€๋งŒ ์˜ฌ๋ฐ”๋ฅธ ๋ฐฉํ–ฅ์œผ๋กœ ํ•œ ๊ฑธ์Œ ๋‚ด๋””๋Ž ๋‹ค๊ณ  ๋А๋‚๋‹ˆ๋‹ค.

๋ฐœํ‘œ๋˜์ง€ ์•Š์€ ์—ฌ๋Ÿฌ LoRA๋ฅผ ํ›ˆ๋ จ์‹œ์ผœ ๋ชจ๋ธ์— ๋ณ‘ํ•ฉํ–ˆ์œผ๋ฉฐ, ๋ชจ๋ธ์˜ ์œ ์ „์  ๊ตฌ์„ฑ์— ๋Œ€ํ•ด ์•„๋ž˜์—์„œ ์„ค๋ช…ํ•˜๊ฒ ์Šต๋‹ˆ๋‹ค. ๋ชจ๋ธ๊ณผ LoRA์˜ ๋ณ‘ํ•ฉ ๋ฐ ์ƒ์„ฑ ๋ฐฉ์‹์„ ๊ณต๊ฐœ์ ์œผ๋กœ ์ด์•ผ๊ธฐํ•จ์œผ๋กœ์จ ๋‹ค๋ฅธ ๋ถ„๋“ค๋„ ๋ฐฐ์šธ ์ˆ˜ ์žˆ๋Š” ๊ธฐํšŒ๊ฐ€ ๋˜๊ธธ ๋ฐ”๋ž๋‹ˆ๋‹ค. :)

Stable Diffusion์˜ ์˜คํ”ˆ ์†Œ์Šค ์ •์‹ ์„ ๋ฏฟ๊ธฐ์— ๋ˆ„๊ตฌ๋‚˜ ์ด ๋ชจ๋ธ์ด๋‚˜ ์ œ LoRA๋ฅผ ๋ณ‘ํ•ฉํ•˜๊ฑฐ๋‚˜ ์ž์œ ๋กญ๊ฒŒ ์‚ฌ์šฉ ๊ฐ€๋Šฅํ•˜๋ฉฐ, ์ด๋ฏธ์ง€ ํŒ๋งค๋‚˜ ๊ฐœ์ธ ํ”„๋กœ์ ํŠธ์—๋„ ์‚ฌ์šฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ œ ์ž์›์„ ๋ณ‘ํ•ฉํ•˜๊ฑฐ๋‚˜ ์‚ฌ์šฉํ•  ๋•Œ ํฌ๋ ˆ๋”ง์„ ์ฃผ์‹œ๋ฉด ๋Œ€๋‹จํžˆ ๊ฐ์‚ฌํ•˜๊ฒ ์Šต๋‹ˆ๋‹ค.

๊ทธ๋Ÿฌ๋‚˜ ์ œ๊ฐ€ ์ง์ ‘ ํ›ˆ๋ จยทํ…Œ์ŠคํŠธํ•˜๋ฉฐ ์ˆ˜๋ฐฑ ์‹œ๊ฐ„์„ ํˆฌ์žํ•œ ๋ชจ๋ธ๊ณผ ์ž์›์ด ์ œ๊ฒŒ ์•„๋ฌด๋Ÿฐ ๋Œ€๊ฐ€ ์—†์ด ์ œ3์ž ์ƒ์„ฑ ์‚ฌ์ดํŠธ์—์„œ ๊ธˆ์ „์  ์ด์ต์„ ์œ„ํ•ด ์ด์šฉ๋˜๋Š” ๊ฒƒ์— ๊ฐ•๋ ฅํžˆ ๋ฐ˜๋Œ€ํ•ฉ๋‹ˆ๋‹ค.

๋ชจ๋ธ ์œ ์ „ ๊ตฌ์„ฑ

๋ชจ๋“  ๊ฒƒ์€ A1111์˜ SuperMerger๋กœ ๋ณ‘ํ•ฉํ–ˆ์Šต๋‹ˆ๋‹ค. ๋ชจ๋“  LoRA๋Š” Kohya๋กœ ํ›ˆ๋ จํ–ˆ์Šต๋‹ˆ๋‹ค.

  1. Dreamshaper XL .5์™€ Rundiffusion XL .5 ๋ณ‘ํ•ฉ

  2. ์—ฌ๊ธฐ์— Fae Style SDXL LoRA ์ถ”๊ฐ€

  3. FaeTastic V1 SDXL .7๊ณผ ProtoVisionXL .3 ๋ณ‘ํ•ฉ

  4. SDXL ๊ณ ํ•ด์ƒ๋„ ๋””ํ…Œ์ผ LoRA ์ถ”๊ฐ€

  5. SDXL ๋” ๋‚˜์€ ๋ˆˆ LoRA ์ถ”๊ฐ€

  6. ๋†’์€ ๋ฏธ์  ๊ฐ๊ฐ, ๊ณ ํ•ด์ƒ๋„, ์„ธ๋ถ€ ๋ฌ˜์‚ฌ๊ฐ€ ๋›ฐ์–ด๋‚œ 1.5 ๊ฐœ์ธ ์ƒ์„ฑ ์ด๋ฏธ์ง€๋กœ FaeTastic SDXL LoRA๋ฅผ ํ›ˆ๋ จํ•˜์—ฌ ๋ณ‘ํ•ฉํ–ˆ์Šต๋‹ˆ๋‹ค. ์ด LoRA๋Š” ๋งค์šฐ ํ›Œ๋ฅญํ•˜๋ฉฐ ๋ณ„๋„๋กœ๋„ ๊ณต๊ฐœํ•  ์˜ˆ์ •์ž…๋‹ˆ๋‹ค.

  7. ํ˜„์‹ค์ ์ด๊ณ  ๊ทธ๋ ค์ง„ ์† ๋ฐ ๋””์ง€ํ„ธ ์•„ํŠธ ๊ณ ํ•ด์ƒ๋„ ์ด๋ฏธ์ง€๋กœ SDXL LoRA๋ฅผ ํ›ˆ๋ จํ–ˆ์œผ๋ฉฐ, ๊ทผ์ ‘ ์ดฌ์˜๋œ ์† ์‚ฌ์ง„๊ณผ ๋ฌผ๊ฑด์„ ์ฅ๊ณ  ์žˆ๋Š” ์‚ฌ๋žŒ๋“ค์˜ ์ด๋ฏธ์ง€๊ฐ€ ํฌํ•จ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ์ด๋ฅผ ๋ณ‘ํ•ฉํ–ˆ์Šต๋‹ˆ๋‹ค.

์ถ”์ฒœ ์ž๋ฃŒ

SDXL LoRA ํ›ˆ๋ จ์— ๊ด€์‹ฌ ์žˆ๋Š” ๋ถ„๊ป˜ Ally์™€ ํ•จ๊ป˜ ๊ด‘๋ฒ”์œ„ํ•œ ํ…Œ์ŠคํŠธ์™€ ํ›ˆ๋ จ์„ ๊ฑฐ์ณ ์“ด ์ด ๊ฐ€์ด๋“œ๋ฅผ ๊ฐ•๋ ฅํžˆ ์ถ”์ฒœํ•ฉ๋‹ˆ๋‹ค: https://civitai.notion.site/SDXL-1-0-Training-Overview-4fb03d5b4cbf482ebe13ffef7bcb8ead

์ œ ์ž์›์ด๋‚˜ Civitai ๊ด€๋ จํ•˜์—ฌ ์งˆ๋ฌธ์ด๋‚˜ ๋„์›€์ด ํ•„์š”ํ•˜๋ฉด ์–ธ์ œ๋“ ์ง€ ๋„์™€๋“œ๋ฆด ์ค€๋น„๊ฐ€ ๋˜์–ด ์žˆ์Šต๋‹ˆ๋‹ค. Civitai ๋””์Šค์ฝ”๋“œ์—์„œ ์ €๋ฅผ ์ฐพ์•„์ฃผ์„ธ์š”! <3

์ด์ „
Illus Scores - IllusN3g
๋‹ค์Œ
AlbedoBase XL - v1.3

๋ชจ๋ธ ์„ธ๋ถ€์‚ฌํ•ญ

๋ชจ๋ธ ์œ ํ˜•

Checkpoint

๊ธฐ๋ณธ ๋ชจ๋ธ

SDXL 1.0

๋ชจ๋ธ ๋ฒ„์ „

v24

๋ชจ๋ธ ํ•ด์‹œ

07b985d12f

์ œ์ž‘์ž

ํ† ๋ก 

๋Œ“๊ธ€์„ ๋‚จ๊ธฐ๋ ค๋ฉด log inํ•˜์„ธ์š”.

๐Ÿฅ‚๐ŸŽ†SDXL FaeTastic๐ŸŽ†๐Ÿฅ‚ - v24 ์ œ์ž‘ ์ด๋ฏธ์ง€

๊ธฐ๋ณธ ๋ชจ๋ธ ์ด๋ฏธ์ง€

๋งŒํ™” ์ด๋ฏธ์ง€

ํŒํƒ€์ง€ ์ด๋ฏธ์ง€

highly detailed ์ด๋ฏธ์ง€