+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
Dai un'occhiata ai miei modelli SDXL:
Modello stilizzato: RAYBURN
Modello realistico: RAYMNANTS
Modello pittorico: RAYCTIFIER
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
MODIFICA: grazie all'utente @sheerazrazak90434 e awskr su Hugging Face,
ora puoi trovare una versione di v3 AIO convertita per Draw Things qui su Hugging.
Un grande grazie a entrambi!
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+

Presentazione di RAYFLUX v3 AIO

AIO è la prossima generazione della mia linea RAYFLUX, dove Photoplus era tecnicamente la v2.
Riporta parte della creatività della v1 a Photoplus, ed è ora completamente integrato con T5, Clip e VAE, il che significa che puoi caricarlo e usarlo con un normale flusso di lavoro Load Checkpoint in Comfy.

Spero che ti piaccia,

R.

QUAL È LA DIFFERENZA?

AIO è un nuovo tentativo di modello che funziona bene nella fotografia ma eccelle anche nella creatività e in soggetti non fotografici generali. È una fusione dei dataset di v1 e Photoplus, con alcune integrazioni LoRA personalizzate e regolazioni manuali del peso dei blocchi. Ho riadattato il modello a FP16 ma utilizzato alcune ottimizzazioni per mantenere il modello base completo che include già VAE, T5XXL-FP16 e il ViT-L-14-BEST-smooth-GmP-TE-only-HF-format di Zeroint integrati mantenendo dimensioni ragionevoli. Il modello non è privo di peculiarità ma risponde meglio di Photoplus in molti soggetti per cui ho deciso di condividerlo.

In sintesi: AIO funziona bene praticamente con tutto ciò che gli si propone, cercando di mantenere lo stile fotografico leggermente granuloso che Photoplus aveva introdotto, ma più creativo.

ESEMPI

1. Un ritratto ravvicinato di alta moda di una donna velata da un niqab nero, su uno sfondo rosso intenso e netto. L'illuminazione drammatica enfatizza la trama del tessuto e lo sguardo penetrante della donna
   

2. Una fotografia ravvicinata viva e dettagliata di un giovane gecko crestato posato su una punta di dito umano, su uno sfondo urbano notturno sfocato e pieno di bokeh.
   

3. Fotografia RAW di una donna di 20 anni, snella, con un'espressione arrabbiata su una cima montuosa rocciosa, colori limitati a rosa e viola.
   

IMPOSTAZIONI

AIO brilla con una combinazione specifica a mio avviso, dpm_adaptive con ddim_uniform. Tutte le impostazioni usate per Photoplus o v1 continueranno a funzionare, ma i risultati sono più creativi usando questa combinazione specifica.

• A differenza degli altri modelli RAYFLUX , max shift e base shift possono essere regolati, con un buon intervallo attorno a 1.2-1.8 per max, contro 0.5-1 per min. Flux Guidance funziona meglio a valori più bassi, 2-3 sembra essere il miglior intervallo.

• Come promemoria, RAYFLUXv1.0 usava Heun/beta e Photoplus DPM_adaptive/beta.

• Per i passaggi, AIO funziona bene tra 14 e 20 steps.

• Nota che AIO funziona bene anche a risoluzioni 2MP! (vedi alcuni esempi sotto)
  

Generalmente faccio una seconda elaborazione con un upscale SD a 2 steps con denoise tra 0.2 e 0.3. Cambio il modello di upscaling a seconda dello stile che cerco, ad esempio 1x_ITF_SkinDiffDetail_lite per ritratti granulosi (ottimo anche a x2!), 4xUltrasharp per illustrazione generica, 4x_Foolhardy_Remacri per uno stile digitale più morbido e pulito. Il prompt usato durante l'upscaling SD è molto importante, non esitare ad abusarne per indirizzare l'upscale nella direzione desiderata (es. scrivi 'grainy' per più grana, 'soft' per meno grana, aggiungi dettagli sul protagonista, ecc.)

Ecco un inizio facile con Rayflux AIO in Comfy. Pochi nodi, ottimi risultati!

PROBLEMI/Peculiarità CONOSCIUTI

• È più lento e consuma più VRAM rispetto alle versioni precedenti. Il checkpoint occupa 21GB (anche se include T5, Clip e VAE quindi l'occupazione di UNET resta intorno ai 16GB). Ci vogliono 50-60 secondi per generare un'immagine 2MP su una 4090.

• C'è molta più variazione da seed a seed a causa delle mie regolazioni rispetto ai due modelli precedenti, il che è positivo secondo me, ma rende anche un po' più difficile domarlo.

• L'integrare gli encoder ha migliorato molto la risposta del modello e la facilità d'uso, ma complica un po' la quantizzazione GGUF perché gioco con diverse precisioni nei blocchi del modello base (che è iniziato come FP8, poi rialzato a FP16 prima di ulteriori addestramenti). L'utente foggyghost0 nei commenti ha anche segnalato problemi di precisione di codifica, quindi vi chiedo pazienza mentre risolvo.