+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
Découvrez mes modèles SDXL :
Modèle stylisé : RAYBURN
Modèle réaliste : RAYMNANTS
Modèle pictural : RAYCTIFIER
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
ÉDITER : merci à l'utilisateur @sheerazrazak90434 et awskr sur Hugging Face,
vous pouvez maintenant trouver une version de v3 AIO convertie pour Draw Things ici sur Hugging.
Un grand merci à eux deux !
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+

Présentation de RAYFLUX v3 AIO

AIO est la nouvelle génération de ma ligne RAYFLUX, où Photoplus était techniquement la v2.
Elle ramène une partie de la créativité de la v1 à Photoplus, et est maintenant totalement intégrée avec T5, Clip et VAE, ce qui signifie que vous pouvez la charger et l'utiliser avec un flux de travail Load Checkpoint normal dans Comfy.

J'espère que vous apprécierez,

R.

EN QUOI EST-ELLE DIFFÉRENTE ?

AIO est une nouvelle tentative de modèle performant en photographie mais aussi efficace en créativité et sur des sujets non photographiques généraux. C'est une fusion de jeux de données de la v1 et Photoplus, avec une intégration LoRA personnalisée et quelques ajustements manuels des poids des blocs. J'ai re-publié le modèle en FP16 mais utilisé des optimisations pour conserver le modèle de base complet incluant déjà le VAE, T5XXL-FP16 et le ViT-L-14-BEST-smooth-GmP-TE-only-HF-format de Zeroint déjà intégrés tout en gardant une taille raisonnable. Le modèle n’est pas sans ses particularités mais répond en fait mieux que Photoplus sur beaucoup de sujets, donc j’ai décidé de le partager.

En résumé : AIO fonctionne bien sur à peu près tout ce que vous lui lancez, et tente de conserver le style photographique légèrement granuleux qu’apportait Photoplus, mais plus créatif.

EXEMPLES

1. Un portrait saisissant et haute couture en gros plan d’une femme voilée d’un niqab noir, avec en arrière-plan un rouge profond et brutal. L’image est dramatiquement éclairée, mettant en valeur la texture du tissu et le regard perçant de la femme
   

2. Photographie en gros plan vibrante et détaillée d’un gecko crêté juvénile perché sur le bout d’un doigt humain, avec un arrière-plan flou urbain rempli de bokeh nocturne.
   

3. Photographie RAW d’une femme de 20 ans, mince, avec un regard colérique au sommet d’une montagne rocheuse, aux couleurs limitées roses et violettes.
   

PARAMÈTRES

AIO brille selon moi avec une combinaison spécifique : dpm_adaptive avec le sampler ddim_uniform. Tous les réglages utilisés pour Photoplus ou v1 continueront de fonctionner, mais les résultats sont plus créatifs avec cette combo spécifique.

• Contrairement aux autres modèles RAYFLUX , max shift et base shift peuvent être ajustés, avec une bonne plage autour de 1.2-1.8 en max, contre 0.5-1 en min. Flux Guidance fonctionne mieux à une valeur plus basse, 2-3 semble être la plage idéale.

• Pour rappel, RAYFLUXv1.0 utilisait Heun/beta et Photoplus DPM_adaptive/beta.

• Pour les étapes, AIO fonctionne très bien entre 14 et 20 steps.

• À noter, AIO fonctionne très bien aussi en résolutions 2MP ! (voir quelques exemples ci-dessous)
  

Je fais habituellement un second passage avec un SD upscale à 2 étapes avec un denoise entre 0.2 et 0.3. Je change le modèle d’upscale selon le style recherché, par exemple 1x_ITF_SkinDiffDetail_lite pour des portraits granuleux (fonctionne aussi très bien en x2 !), 4xUltrasharp pour illustration générique, 4x_Foolhardy_Remacri pour un style d’illustration numérique plus doux et propre. Le prompt utilisé lors de l’upscale est très important en général, n’hésitez pas à en abuser pour orienter l’upscale dans la direction voulue (ex. écrire grainy pour plus de grain, soft pour moins, ajouter des détails sur votre protagoniste, etc.)

Voici un démarrage simple pour Rayflux AIO dans Comfy. Peu de noeuds, excellents résultats !

PROBLÈMES/ PARTICULARITÉS CONNUS

• Mamelons, masculins ou féminins. Il y a un net manque de nudité dans mon jeu de données et cette version n’aide pas beaucoup à ce sujet. Il existe cependant beaucoup de LoRAs pour cela, donc ce n’est pas trop dramatique.

• Il est plus lent et plus gourmand en VRAM que les versions précédentes. Le checkpoint pèse 21GB (bien qu’il inclue T5, Clip et VAE donc l’empreinte UNET reste autour de 16GB). Il faut 50-60s pour générer une image 2MP sur un 4090.

• Il y a beaucoup plus de variations d’un seed à un autre à cause de mes ajustements et comparé aux 2 modèles précédents, ce qui est une bonne chose selon moi, mais rend aussi un peu plus difficile de le domestiquer.

• L’intégration des encodeurs a vraiment amélioré la réponse du modèle et la facilité d’utilisation, mais rend d’une certaine manière la quantification GGUF plus délicate car je joue avec différentes précisions dans les blocs du modèle de base (qui a commencé en FP8 puis re-casté en FP16 avant un entraînement supplémentaire). L’utilisateur foggyghost0 dans les commentaires a également signalé quelques problèmes de précision d’encodage, merci de votre patience pendant que je règle cela.