Ceci est la LoRA officielle de l'implémentation DMD2 tirée de l'article amélioré Distribution Matching Distillation for Fast Image Synthesis.

dmd2_sdxl_4step_lora

Modèle original disponible sur Huggingface tianweiy/DMD2.

Paramètres recommandés

Étapes : 8

Poids LoRA : 0.7

Sampler : LCM

Ordonnanceur : Normal, Simple

CFG : 1.4 - 1.8

J'utilise des paramètres similaires à la fois sur une image de base basse résolution et sur le passage de raffinement upscalé (correction hires). Les réglages ci-dessus représentent mes recommandations personnelles, mais je vous suggère d'expérimenter pour trouver ce qui fonctionne le mieux pour vous et le modèle que vous utilisez.

Combiner les deux LoRAs

Il a aussi été rapporté qu'il est plus performant d'utiliser à la fois les versions fp32 et fp16 simultanément avec un poids de 0.5 chacune.

Poids LoRA recommandé

Chargez la LoRA comme n'importe quelle autre. Je recommande personnellement un poids de 0.7, mais d'autres affirment que 1.0 est mieux.

Utilisation

Vous devriez pouvoir l'utiliser avec n'importe quel checkpoint SDXL ou similaire. Utilisez les réglages ci-dessus.

Vous pouvez aussi fusionner cette LoRA dans un checkpoint et enregistrer ce dernier, ce qui inclut directement le résultat de la LoRA dans le checkpoint. Cela signifie que vous n'aurez plus besoin de charger la LoRA, tout en continuant à pouvoir l'utiliser avec LCM et peu d'étapes pour un bon résultat.

La LoRA elle-même n'ajoute aucune amélioration de vitesse, elle vous permet simplement de générer en moins d'étapes, avec un meilleur résultat.

Si les résultats sont ternes, désaturés ou fades, essayez d'augmenter le CFG.

Licence

Creative Commons Attribution Non Commercial 4.0

Je ne suis pas le créateur du modèle, je le télécharge ici seulement pour faciliter le téléchargement et la référence dans les créations. Tout le crédit revient à Tianwei Yin.