+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
Confira meus Modelos SDXL:
Modelo estilizado: RAYBURN
Modelo realista: RAYMNANTS
Modelo pictórico: RAYCTIFIER
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
EDITAR: graças ao usuário @sheerazrazak90434 e awskr no Hugging Face,
você agora pode encontrar uma versão da v3 AIO convertida para Draw Things aqui no Hugging Face.
Agradecimento a ambos e um grande obrigado!
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+

Apresentando RAYFLUX v3 AIO

AIO é a próxima geração da minha linha RAYFLUX, onde Photoplus era tecnicamente a v2.
Ele traz de volta um pouco da criatividade da v1 para Photoplus, e agora está todo incorporado com T5, Clip e VAE, significando que você pode carregar e usar com o fluxo normal de Load Checkpoint no Comfy.

Espero que gostem,

R.

QUAL A DIFERENÇA?

AIO é uma nova tentativa de criar um modelo que seja bom em fotografia, mas que também tenha bom desempenho em criatividade e temas gerais não fotográficos. É uma fusão de datasets da v1 e Photoplus, com algumas integrações customizadas LoRA e ajustes manuais nos pesos dos blocos. Reconverti o modelo para FP16, mas usei algumas otimizações para manter o modelo base completo, que inclui o VAE, T5XXL-FP16 e o ViT-L-14-BEST-smooth-GmP-TE-only-HF-format de Zeroint já incorporados, mantendo o tamanho razoável. O modelo tem suas peculiaridades, mas responde melhor que Photoplus em muitos temas, então decidi compartilhar.

Resumo: AIO terá bom desempenho praticamente em qualquer coisa que você usar, e tenta preservar o estilo fotográfico levemente granulado que Photoplus trouxe, mas mais criativo.

EXEMPLOS

1. Um retrato impactante e de alta moda de uma mulher com niqab preto, contra um fundo vermelho escuro e intenso. A imagem é dramaticamente iluminada, destacando a textura do tecido e o olhar penetrante da mulher
   

2. Uma fotografia vibrante e detalhada de close-up de um jovem gecko crestado sentado na ponta do dedo humano, com um fundo noturno urbano desfocado e com bokeh.
   

3. Fotografia RAW de uma mulher de 20 anos, magra, com olhar zangado em um pico rochoso da montanha, com cores limitadas ao rosa e roxo.
   

CONFIGURAÇÕES

AIO se destaca com uma combinação específica na minha opinião: dpm_adaptive com ddim_uniform. Todas as configurações usadas para Photoplus ou v1 continuarão funcionando, mas os resultados são mais criativos usando esta combinação específica

• Diferente dos outros modelos RAYFLUX , o max shift e base shift podem ser ajustados, com uma boa faixa sendo em torno de 1.2-1.8 no máximo, contra 0.5-1 no mínimo. Flux Guidance funciona melhor em valores mais baixos, 2-3 parece ser a faixa ideal.

• Como lembrete, RAYFLUXv1.0 usava Heun/beta e Photoplus DPM_adaptive/beta.

• Para passos, AIO funciona bem entre 14 e 20 passos.

• Como observação, AIO também funciona muito bem em resoluções de 2MP! (veja alguns exemplos abaixo)
  

Geralmente faço uma segunda passada com um upscale SD em 2 passos com denoise entre 0.2-0.3. Eu alterno o modelo de upscaling dependendo do estilo que estou buscando, por exemplo: 1x_ITF_SkinDiffDetail_lite para retratos granulados (funciona muito bem em x2 também!), 4xUltrasharp para ilustrações genéricas, 4x_Foolhardy_Remacri para estilo digital mais suave e limpo. O prompt que você usa no upscale SD é muito importante em geral, não hesite em abusar dele para direcionar o upscale para o estilo desejado (ou seja, escreva "grainy" para mais granulação, "soft" para menos granulação, adicione detalhes sobre seu protagonista, etc.)

Aqui está um começo fácil para Rayflux AIO no Comfy. Poucos nós, ótimos resultados!

PROBLEMAS/PECULIARIDADES CONHECIDAS

• Seios, masculinos ou femininos. Há uma clara falta de nudez no meu dataset e, de alguma forma, esta versão não ajuda muito nisso. Existem muitas LoRAs para isso, então não é tão dramático.

• É mais lento e consome mais VRAM que as versões anteriores. Com checkpoint rodando em 21GB (embora inclua T5, Clip e VAE, de modo que o uso do UNET fique em torno de 16GB). Leva 50-60s para gerar uma única imagem de 2MP numa 4090.

• Há muito mais variação entre seeds devido aos ajustes realizados, comparado aos dois modelos anteriores, o que é bom na minha opinião, mas também torna um pouco mais trabalhoso domesticar o modelo.

• Incorporar encoders melhorou muito a resposta do modelo e a facilidade de uso, mas torna a quantização GGUF mais complexa, pois estou mexendo com diferentes precisões nos blocos do modelo base (que começou como FP8 e foi convertido para FP16 antes do treinamento adicional). O usuário foggyghost0 nos comentários também reportou alguns problemas de precisão na codificação, então, por favor, tenham paciência enquanto eu resolvo isso.