Hyphoria [Illu & NAI] - v0.01

제가 좋아하는 여러 모델을 실험적으로 병합한 것으로, 각 모델의 장점을 활용하는 알고리즘을 사용했습니다. 조언과 안내를 주신 @epiTune님께 감사드리며, 아직 배울 점이 많고 해야 할 일도 많습니다.

Hyphoria의 가장 큰 초점은 프롬프트 준수였습니다. 즉, 프롬프트 상자에 입력한 내용을 모델이 최선을 다해 구현하는 것입니다. 여러 훌륭한 모델 위에 구축되어, 프롬프트 이해를 시각적으로 훌륭하게 연결하고 아름다운 이미지를 만들기 위해 빈틈을 채울 수 있습니다.

물론 스타일 유연성도 원했으며, 예상대로 LORA를 사용할 수 있지만, 이 모델 안에 숨겨진 훌륭한 아티스트와 예술 스타일이 너무 많아 무엇이 가능한지 경이롭습니다. 꼭 탐험해 보시길 추천드립니다; 저도 그러고 있습니다!

마지막으로 저는 세미 리얼리즘을 좋아해서 이 모델이 큰 어려움 없이 그것을 comfortably 구현할 수 있도록 했으며, 기본적으로 이에 편향되어 있습니다. 하지만 그렇다고 순수한 애니메나 2D 스타일을 못 하는 것은 아니며, 원하는 태그를 넣으면 얻을 수 있습니다(다만 너무 많은 품질 태그는 일부 스타일 선택에 방해가 될 수 있습니다).

권장 설정

• 스텝: 20-35 (저는 항상 35를 좋아하지만, 낮춰도 좋습니다)

• CFG: 2.5-6

  • 저는 3을 사용합니다. 개인적으로 적당한 값이나, 견고한 프롬프트라면 1까지 낮출 수 있으며, 특히 어둡고 거친 분위기를 원할 때 좋습니다.

• 샘플러: DPM++ 2M SDE (또는 CIVITAI Gen에서 DPM++ 2M)

• 스케줄러: Karras

• 해상도: 일반 생성에 1024x1024 - 1280x1280을 권장합니다. 최대 1536x1536까지 지원하며 모델 손상 없이 작동하지만 일부 신체 연장이 발생할 수 있습니다. 같은 총 픽셀 수를 가진 어떤 가로세로 비율도 작동할 것입니다.

• 프롬프트 작성: 이 모델은 프롬프트를 정말 잘 듣기 때문에, 불필요한 내용을 피하고 프롬프트를 집중시키세요.

  • 권장 긍정 태그: masterpiece, best quality, absurdres

  • 권장 부정 태그: worst quality, low quality

  • 제작하려는 이미지에 따라 긍정 또는 부정 품질 태그를 생략할 수도 있습니다. 예를 들어 거친 이미지에는 일부 품질 태그를 빼는 것이 좋습니다. 다른 품질 태그는 해당 종류의 이미지를 원하는 경우 효과적입니다.

사용한 모델

• IllustriousXL V2.0 Stable - 기본 병합 대상

• Rouwei v0.7 eps

• IllumiYume v3.1

• Hassaku v1.3 Style A

• ionsyx v3.0

• Wicked Illustrious Mix v1.1

• mdntIllus Syn v1

• Kokio v2.0

• Diving Illustrious Anime v11

• Bismuth Illustrious Mix v2.0

• NoobAI v1.1 eps

• Unreleased Merge

• Plant Milk Hemp II

• Plant Milk Coconut

알고리즘을 사용해 각 모델의 UNET과 CLIP을 텐서 단위로 비교하고, 제가 설정한 가중치에 따라 제가 주관적으로 조정한 값으로 최적의 것을 선택했습니다. 어떤 모델의 어느 부분이 어디에 사용되었는지 정확하게는 알 수 없으며, 병합 스크립트가 최선으로 판단한 부분을 선택했습니다.

향후 버전에서는 다양한 모델과 더 세밀한 조정(블록 단위 또는 그 이하 수준) 실험을 계획하고 있습니다.

라이선스 및 사용

SDXL - CreativeML Open RAIL++-M
Illustrious - https://freedevproject.org/faipl-1.0-sd/
NoobAI-XL - https://civitai.com/models/license/1140829

위 라이선스 목록은 Plant Milk 페이지에서 복사했습니다.