Fonctionne avec les LoRA Pony et Animagine

Et conserve la plupart des connaissances sur les personnages et styles d'Animagine

Versions

Gamma

• Support activé pour les LoRAs Pony*

• Qualité des membres améliorée

• Qualité de fond diminuée en raison de la fusion supplémentaire du CLIP/TE de PonyDiffusion**

• (Possiblement) meilleur érotisme

• Nom du modèle changé en Ponymagine 9.1 pour refléter la somme de Pony v6 et Animagine v3.1

• *- Certains LoRAs Pony pourraient ne pas fonctionner complètement, mais au moins ils ne produiront plus de bruit instable selon mes tests. Toute fusion supplémentaire TE pour améliorer le LoRA Pony entraînera une perte des connaissances sur les personnages/artistes du modèle Animagine

• **- Je recommande d’utiliser IPadapters ou le LoRA Worldly XL pour de meilleurs fonds https://civitai.com/models/376395?modelVersionId=420317

Beta

• Première version publiée

• Plus orientée vers Animagine

• Ne supporte pas tous les LoRA Pony. La plupart génèrent du bruit !

Objectif

L'objectif initial du modèle était d'injecter les connaissances personnages/artistes d'Animagine dans PonyDiffusion sans utiliser de tokens étranges comme 'aua' et de pouvoir utiliser les LoRAs entraînés sur l'un ou l'autre des modèles.

Le résultat final, bien que conservant les connaissances, a quelque peu atténué certains personnages/styles, mais il approche 'assez près' avec plus de marquage. Il supporte la structure de marquage de chefs-d'œuvre mais l'ajout de balises 'score' ne nuit pas.

Détails de la fusion

Gamma est une fusion entre PonyDiffusion v6 et Animagine 3.1. Après la fusion, un Lycoris extrait de la différence entre AutismMix Confetti et PonyDiffusion v6 a été fusionné avec un ratio de 0.8

Beta est une fusion entre un mix PonyDiffusion v6 (AutismMix Confetti) et Animagine 3.1 rendue possible grâce à la fusion DARE.

Ceci est une version BETA. Elle n’est pas parfaite et ne doit pas être considérée comme telle. Son but principal est de montrer que les fusions entre modèles de style Pony et autres modèles SDXL sont possibles sans artefacts.

Avertissement

Comme quelqu'un l'a déjà mentionné, tous les LoRAs Pony ne fonctionnent pas correctement sur le modèle Beta ! Cela a été obtenu durant sa phase alpha mais abandonné en faveur de la fusion DARE. J'ai une idée pour réactiver le support des LoRA Pony, mais cela nécessitera plus de tests de mon côté. Support ajouté dans Gamma

Voici une image illustrant le bruit actuel lors de l'utilisation d'un LoRA Pony sur Beta

Voici une image avec un LoRA Pony sur une ancienne version Alpha

Exemples

Puisque je viens de /vtai/, les exemples se concentreront sur les vtubers. Cela ne signifie pas que le modèle ne peut rien faire d’autre. Partagez vos créations et je pourrais les mettre en avant.

L’intention des images en grille publiées n’est pas de sélectionner les meilleures images créées avec ce modèle mais plutôt de montrer les pertes en personnage/style causées par la fusion. Je suis sûr que d’autres peuvent faire de meilleures fusions en utilisant cette méthode.

Les données de génération montrent 'Aniamgine-xl-3.1' comme modèle car j’avais 3 modèles chargés au moment de la fusion : Animagine, AutismMix et la fusion résultante. Les exemples ont été extraits en même temps que je testais la fusion. ComfyUI est étrange à cet égard.

Pour le modèle Gamma, aucun détail de génération n’a été conservé car j’ai commencé à utiliser des nœuds de concaténation. Si vous voulez certaines données des exemples avec mon workflow, je les ai uploadées ici : https://files.catbox.moe/slyoia.zip

Licence

Comme la licence de PonyDiffusion est plus stricte, le modèle suivra la même version modifiée, citant ce qui suit à propos du modèle PonyDiffusion :

Les modifications suivantes ont été ajoutées à la Fair AI Public License :

Il est interdit d'exécuter une inférence de ce modèle sur des sites Web ou des applications permettant toute forme de monétisation (inférence payante, niveaux plus rapides, etc.). Cela s'applique à tous modèles dérivés ou fusions de modèles.

Une permission explicite pour l'inférence commerciale a été accordée à CivitAi et Hugging Face

Recette de fusion

Pour découvrir ou réutiliser la recette de fusion, vous avez besoin de ComfyUI et de l’extension DARE.

Une fois les deux installés, il suffit de glisser le modèle dans ComfyUI pour charger le même workflow que j’ai utilisé lors de la fusion. (ATTENTION : très désordonné !)

Un exemple JSON a également été ajouté aux fichiers d’entraînement du modèle

Remerciements

Je ne m'attendais pas à ce que tant de gens téléchargent et apprécient un modèle destiné aux tests. J'ai une nouvelle version en test qui ne génère pas de bruit lors de l'utilisation des LoRAs Pony mais actuellement leur effet est atténué ou ne fonctionne pas du tout. Je travaille à son amélioration pour permettre le bon fonctionnement des LoRAs Pony. Le côté triste est que les fonds et l'esthétique semblent être affectés plus la compatibilité LoRA est élevée, et les LoRAs conceptuelles ne fonctionnent pas très bien pour le moment.