Il s'agit de l'implémentation officielle LoRA du DMD2 tirée de l'article Improved Distribution Matching Distillation for Fast Image Synthesis.

dmd2_sdxl_4step_lora

Modèle original sur Huggingface tianweiy/DMD2.

Paramètres recommandés

Étapes : 8

Poids LoRA : 0.7

Échantillonneur : LCM

Planificateur : Normal, Simple

CFG : 1.4 - 1.8

J'utilise des réglages similaires à la fois sur une image de base basse résolution et lors du passage de raffinement suréchantillonné (correction hires).

Utilisation

Chargez la LoRA comme n'importe quelle autre. Je recommande un poids de 0.7, mais n'hésitez pas à expérimenter.

Vous devriez pouvoir l'utiliser avec n'importe quel checkpoint SDXL ou similaire. Utilisez les paramètres ci-dessus.

Vous pouvez aussi fusionner ceci dans un checkpoint et sauvegarder, pour inclure directement le résultat de la LoRA dans le checkpoint. Cela signifie que vous n'avez plus besoin de charger ceci comme une LoRA, tout en pouvant l'utiliser avec LCM et peu d'étapes pour un bon résultat.

La LoRA elle-même n'apporte pas d'amélioration de vitesse, elle permet simplement de générer avec moins d'étapes et un meilleur résultat.

Si les résultats semblent délavés et ternes, essayez d'augmenter le CFG.

Licence

Creative Commons Attribution Non Commercial 4.0

Je ne suis pas le créateur du modèle, je le mets juste en ligne ici pour faciliter le téléchargement et la référence dans les créations. Tout le mérite revient à Tianwei Yin.