모델이 도움이 되셨다면, 지원을 고려해 주시기 바랍니다. 여러분의 기부금은 전적으로 SDXL 커뮤니티 발전에 사용될 것입니다.

🙋🏼‍♂️ 저희와 함께하세요 (discord) ㅤ|ㅤ 🛒 구매하기ㅤ |ㅤ 🌱 후원하기

AlbedoBase XL (SFW&NSFW)

리파이너는 필요 없으며, VAE가 포함되어 있습니다.

목표

Stable Diffusion XL은 35억 개의 매개변수(리파이너 제외)를 가지고 있으며, 이는 SD v1.5 버전보다 약 3.6배 더 많습니다. 이것은 단순한 숫자가 아니라 성능 향상으로 이어질 수 있는 중요한 수치라고 생각합니다.

우리 커뮤니티의 폭발적인 기여 덕분에 SD v1.5의 전반적인 성능이 상상 이상으로 향상되었음을 깨달은 지 오래되었습니다. 따라서 이 성능 향상을 XL 버전에도 최적으로 재현하기 위해 AlbedoBase XL 모델을 완성하고 있습니다.

제 목표는 Civitai에 공개 업로드된 모든 체크포인트와 LoRA의 성능을 직접 테스트하고 여러 필터를 거쳐 최적이라고 판단되는 자원만 병합하는 것입니다. 이를 통해 Midjourney와 같은 회사의 이미지 생성 AI 성능을 뛰어넘을 것입니다.

현재 AlbedoBase XL v3.1 Large는 약 200개의 엄선된 체크포인트와 251개의 LoRA를 병합했습니다.

기록

v3.1-Large

• V3에서 사용된 재귀 스크립트를 이용해 SDXL 최신 버전 50개 이상을 병합했습니다.

스펙 그리드(370.7 MB): 다운로드

v3-mini

오래 기다리게 해서 진심으로 사과드립니다.

개인적인 일로 인해 새로운 버전을 작업하면서 건강 문제도 겪고 있습니다. 이 글을 쓰는 지금도 어려움을 겪고 있습니다.

간단한 업데이트만으로는 부족하다고 느껴 더 자세한 메시지를 공유하오니 양해 부탁드립니다.

버전 2.0 출시 이후 독학으로 딥러닝을 공부해 왔습니다. 정식 학위는 없으며, 프로그래밍에 약간 능숙한 정도이고, 예술 배경만 가지고 있습니다. 그래서 투자한 시간과 노력 대비 수학과 과학적 기초가 부족해 큰 혁신을 이루지 못했습니다. 하지만 자율 학습과 연구 경험은 제 인생에서 매우 소중한 보물이 되었습니다.

최근에는 버전 2.0 이후 수백 개의 공식과 방법을 재구성하여 흥미롭고 성공적인 알고리즘을 개발했습니다. 병합 과정은 SDXL1.0, SD1.5 및 엄선된 모델들을 바탕으로 했으며, 주요 다섯 범주인 “ANIME,” “REALISM,” “ARTISTIC,” “NSFW,” “BASE”로 분류하여 데이터셋으로 활용했습니다. 이 방법은 매우 흥미로운 결과를 가져왔습니다.

하지만 알고리즘 개발만큼이나 성능 테스트 기간에 신체적, 정신적 건강이 크게 악화되어 이 작업을 혼자 지속할 수 없다는 것을 깨달았습니다. 그래서 이 버전을 공개하기로 결심했습니다.

이제 기대해 온 AlbedoBaseXL V3 Mini 버전 출시를 기쁘게 알립니다. 이 모델은 소규모 병합이지만 특정 영역에 제한되지 않고 다양한 분야에서 뛰어난 성능을 보입니다. SDXL1.0의 새로운 기본 모델로서도 가능성이 큽니다. (참고로 제 병합 알고리즘은 “선형 병합”이 아니므로 사실상 새로운 파인튜닝 모델로 간주할 수 있습니다.)

이 모델은 기존 AlbedoBase 모델과 함께 다재다능하며, 모든 이전 버전을 뛰어넘습니다. (NSFW 콘텐츠는 극단적이지 않지만 v2.1과 같은 이전 버전보다 표현 범위가 넓습니다. 향후 전용 NSFW 병합 모델이 출시될 예정입니다.)

최근 공유된 모델 중 병합 또는 외부 상업화를 금지하는 라이선스를 채택하는 경우가 많아진 점이 아쉽습니다. 이로 인해 훌륭한 모델 중 일부를 병합에 사용할 수 없게 되었습니다.

시간과 노력이 많이 든 높은 품질의 모델을 병합에 쓸 수 있도록 무료 라이선스를 제공해 주신 모델 개발자 분들께 진심으로 감사드립니다.

곧 다시 찾아뵙겠습니다.

ANIME, REALISM, ARTISTIC, 2.5D, 3D, NSFW 등 다양한 분야에서의 성능 테스트를 기대합니다.

모델 개발자는 씨앗만 심을 뿐입니다. 그 꽃과 열매를 키우는 것은 최종적으로 사용자와 아티스트 여러분입니다.

항상 감사합니다.

저의 작업을 소액으로나마 지원하시려면 아래 링크를 이용해 주세요. 현재 취업이 어렵고 생계가 불확실한 상황입니다.

🌱 후원하기

스펙 그리드(380.5 MB): 다운로드

v2.1
새 병합 알고리즘과 공식을 사용하여 v0.1부터 2.0까지 재병합 및 조정.

스펙 그리드(424.5 MB): 다운로드

v2.0

AlbedoBase XL Pre 제작에 도움 주신 모든 분께 감사드립니다. 없이 이 날짜에 출시하지 못했을 것입니다. 대단히 감사합니다!

• 기존 AlbedoBase XL 모델들을 하나로 수렴시키는 커스텀 스크립트를 작성했습니다. 독특한 공식에 따라 모든 U-NET와 CLIP 블록의 행과 열 가중치를 정교하게 일치시켰습니다.

• 이미지 생성에 버그가 발생하거나 아무것도 생성되지 않으면 CLIP SKIP 2로 전환하거나 프롬프트를 약간 수정하세요! CLIP이 인식하지 못하는 프롬프트 조합이 있을 수 있습니다. 이 경우 단어 순서를 변경하거나 다른 단어를 쓰거나, 가장 간단하게 CLIP SKIP을 변경할 수 있습니다. 앞으로 v1.3처럼 점진적으로 문제를 해결할 예정입니다.

스펙 그리드(403.5 MB): 다운로드

v1.3

• 모델의 랜덤성과 관련된 품질을 보여주기 위해, 샘플링용 전시 이미지에 대해 시드 값을 '9'로 표준화하여 즉시 생성했습니다.

• 특히 이 버전은 네거티브 프롬프트가 큰 영향을 끼치므로, 네거티브 프롬프트 칸을 비워두는 것이 보통 좋은 품질을 만듭니다.

스펙 그리드(438.7 MB): 다운로드

• 보다시피, Steps 수가 증가할수록 모든 샘플러에서 사용 가능해지며 품질도 향상됩니다.

• 제가 개발하고 병합한 LoRA의 효과로 인해, 아래에 설명된 대로 태그 목록보다 문장형 프롬프트를 사용하는 것이 품질 향상에 직접적입니다.

• 45개의 체크포인트와 7개의 LoRA를 병합했습니다. 그 후 AlbedoBase v0.4와 v0.3을 각각 0~5% 미만으로 순서대로 병합하여 희석된 오래된 병합 모델을 다시 활성화했습니다.

• 7개의 LoRA 중 하나는 제가 직접 만들었으며, GPT4-V를 사용해 총 174개의 고품질 회화 사진에 대한 캡션을 분석하고 주석을 달았습니다. 이 LoRA를 병합한 결과 매우 선명한 이미지와 뛰어난 프롬프트 이해도가 나타났습니다.

• 제가 만든 자체 제작 LoRA는 Creative 레벨 이상의 Ko-fi 후원자에게만 구매 가능합니다.

v1.2

• 최신 22개의 체크포인트를 병합했습니다.

스펙 그리드(565.6 MB): 다운로드

v1.1

• 안정화되었습니다.

• 더 세밀해졌습니다.

• 고급 사용자라면 버전 1.0을 추천합니다. 1.0 버전이 적절한 설정을 찾으면 훨씬 생동감 있는 작품을 출력할 수 있습니다.

스펙 그리드(349.7 MB): 다운로드

v1.0

• 106개의 LoRA를 병합했습니다.

• 19개의 체크포인트를 병합했습니다.

1. 모델은 설정에 따라 다른 결과를 낼 수 있으므로 사용 전 스펙 그리드를 꼭 확인하세요.

   • 비대칭 눈이나 픽셀화 문제를 해결하기 위해 특정 네거티브 프롬프트 몇 가지를 사용하는 것이 도움이 됩니다. 스펙 그리드는 CPU 또는 GPU 기기에 따라 다를 수 있으니 참고용으로 활용하세요. 몇 가지 네거티브 프롬프트를 실험해 품질을 개선하세요(ex; 사시). 병합된 LoRA 수가 많아질수록 모든 설정을 동일하게 만족시키는 것은 어렵습니다. 하지만 1.0 버전에서는 적절한 설정으로 다양한 측면에서 놀라운 품질을 낼 수 있으니 이 점에 집중해 주시기 바랍니다. 앞으로 더 안정적인 버전을 제공하겠습니다.

2. 유용한 설정 값은 쇼케이스에서 찾거나 다른 사용자들의 설정을 검색해 보세요.

3. 언제나 네거티브 프롬프트를 비워 두는 것이 최적의 결과를 냅니다.

4. v1.0 개발에 많은 노력을 들였으니 잠시 휴식을 취하려 합니다. 모델 사용을 즐기시고, 병합하신 분은 Civitai에 무료로 공유해 주세요. 모두가 함께 개선할 수 있습니다.

스펙 그리드(479.4 MB): 다운로드

v0.4

• 132개의 LoRA를 병합했습니다.

• 4개의 체크포인트를 병합했습니다.

스펙 그리드: 다운로드

v0.3

• 모든 샘플러에서 개선되었습니다.

• 실제와 같은 리얼리즘을 달성했습니다.

• 안정화되었습니다.

스펙 그리드: 다운로드

v0.2

• 선명도와 세부 묘사가 크게 향상되었습니다.

• 손과 발 표현이 개선되었습니다.

• 구성, 추상화, 흐름, 빛과 색 등 미적 요소가 크게 향상되었습니다.

v0.1

• SDXL1.0 모델에 적절한 파인튜닝 후, Civitai에 공개된 40개 이상의 고품질 모델을 세심하고 의도적으로 병합했습니다.

• 테스트는 주로 최소한의 프롬프트 토큰으로 최대 품질을 보장하는 데 초점을 맞췄으며, 많은 토큰을 사용할 때 품질이 얼마나 향상되는지는 확인되지 않았습니다. (자체 테스트 후 결과를 공유해 주세요)

• 일반적으로 가장 아름다운 결과는 현실과 애니메이션의 중간 지점에서 나옵니다.

• 적절한 프롬프트 사용 시 표현하지 못하는 것은 거의 없습니다. (다른 모델을 능가하는 기반 모델로서 풍부한 가치를 지닌다고 주장하지만, 현재는 v0.1임을 명심해 주세요)