RunDiffusion XL - 베타

RunDiffusion XL 베타 소개!

RunDiffusion.com이 다시 한번 해냈습니다! 세계 최초 SDXL 모델 중 하나입니다!

15,000명 회원 디스코드에 가입하세요 여기서 프로젝트를 도와드리고, 최선의 활용법을 이야기하며, 흥미로운 업데이트와 소식을 전하고, 우리가 생성한 멋진 예술 작품을 공유합니다.

왜? SDXL이 이미 훌륭하지 않나요?

네! 이번이 한 단계 더 발전했다고 생각합니다! SDXL은 여전히 사람 얼굴이 플라스틱 같아 보이거나 눈, 손, 추가 사지가 이상해지는 문제가 있습니다. 모든 문제를 해결하지는 못했지만 (그래서 베타입니다) 거의 근접했습니다! 저희는 Civitai.com에서 가져온 수백 개 SDXL 프롬프트를(ComfyUI 사용) 직접 테스트하여 파이프라인 일치 여부를 확인했고, 이 모델이 더 나은 이미지를 생성한다는 것을 발견했습니다! 직접 확인해 보세요.

이 모델은 명확하게 프롬프트로 지정하지 않으면 주로 클로즈업이나 "헤드샷"을 선호하는 경향이 있습니다. 이 점에 대한 피드백을 받고 싶습니다.

강점

• 동물, 자동차, 사람에 대해 더 사실적 이미지 생성

• 다른 모델, 다른 생성 결과를 경험할 수 있습니다. 좋아하는 프롬프트와 함께 사용해 보세요!

• 더 나은 초상화. SDXL은 피사체를 멀리 배치하는 경향이 있지만, 이 모델은 더 가까이 보이게 합니다.

• 눈과 손 디테일이 조금 더 좋음 (테스트 결과 기준)

• 프롬프트 제어가 향상됨. 쉼표를 사용해 피사체와 스타일을 구분하세요!

약점

• 여전히 일부 "플라스틱" 같은 개념이 존재함 (음식 등, 프롬프트를 테스트하고 피드백 부탁드립니다!)

• 때로는 과도한 "사람 중심" 편향이 있음

• 창의력이 약간 제한될 수 있음. "사실적" 모델로 볼 수도 있습니다. 하지만 꼭 테스트해 보세요!

• "스포츠카"에 대한 편향이 있음 (ㅋㅋ)

RDXL은 프롬프트를 더 잘 따르는 경향이 있습니다. 예를 들어 "상반신"을 요청하면 그에 맞게 생성됩니다.

사용법

• 일반적으로 프롬프트를 입력하세요. 쉼표로 피사체와 스타일을 구분하세요. 원하는 결과가 안 나오면 해당 토큰을 여러 위치에 반복해서 넣어보세요. 예: 용암으로 만들어진 아이언맨, 용암이 스며든 갑옷 ... 등 만약 아이언맨이 생성되지 않으면, 토큰을 다른 곳에 넣어보세요, 예: 용암으로 만들어진 아이언맨, 용암이 스며든 갑옷, 마블 아이언맨 슈퍼히어로 ... 등

• 표준 리파이너 또는 1.0-0.9 리파이너를 사용하세요. https://huggingface.co/stabilityai/stable-diffusion-xl-refiner-1.0/blob/main/sd_xl_refiner_1.0_0.9vae.safetensors

• ComfyUI를 사용하세요

개발 과정

700개의 소규모 데이터셋으로 학습을 진행했고, 20 에포크 동안 14,000 스텝을 수행했습니다. 모든 데이터를 최대한 상세하게 캡션으로 수동 작업했습니다. SDXL은 학습에 매우 민감하다는 것을 알게 되었으며, 저희가 이루어낸 변화가 매우 고무적입니다. SDXL의 미래가 밝습니다!

앞으로의 계획

생성 과정을 더 쉽게 만들기 위해 ComfyUI를 플랫폼에 도입하여 메타데이터가 포함된 이미지를 한 번에 드롭해 쉽게 생성할 수 있도록 할 예정입니다. 이는 워크플로우 공유의 미래이며, 이 작업을 플랫폼에 적용하는 데 도움을 준 /u/comfyanonymous님께 매우 감사드립니다. 또한 SeargeSDXL 작업을 해주신 /u/Searge님께도 특별히 감사드립니다. 저희는 그 워크플로우를 매우 좋아합니다! (생성 데이터를 Civitai.com에서도 사용할 수 있도록 작업할 수 있을까요?)

피드백을 받아 계속해서 이 모델을 개선해 나가겠습니다. 몇 주 내에 정식 출시를 기대해 주세요.