SameFace Fix [Flux Lora] - v0.1
Parole Chiave e Tag Correlati
Suggerimenti
Usa questa Lora con un peso NEGATIVO per agire come un prompt negativo senza averne bisogno esplicito.
Questa Lora diversifica l'aspetto delle donne specificando cosa NON deve apparire nella generazione, invece di aggiungere caratteristiche.
Applicando un'alta guida con questa Lora si mantiene la qualità dell'immagine evitando volti tipicamente identici.
La Lora è altamente sperimentale; il feedback è apprezzato per migliorare la qualità ed esplorare nuove varianti.
Punti Salienti della Versione
Prima versione!
Importante: Questa Lora deve essere usata con un peso NEGATIVO.
Inoltre: il modello è pensato per diversificare l'aspetto delle donne solamente. Ho intenzione di creare un modello separato per uomini in seguito (in particolare per uomini con la barba)
Un altro fatto interessante: la dimensione della Lora è di soli 4Mb (è limitata a 2 blocchi con un alto rank)
Quindi, cos'è un "Sameface"?
È un problema comune nell'AI generativa, dove il modello genera persone con aspetto identico. A differenza di SD1.5/SDXL, questo non è solo il risultato di un dataset diversificato che converge in un singolo token come "donna". In Flux, Dev/Schnell sono stati distillati dalla versione Pro, causando una perdita di diversità.
Perché usare un peso negativo?
Lora è stato addestrato sulle foto più generiche di donne generate da Flux.
Se applichi questa Lora con un peso NEGATIVO, funzionerà come una sorta di prompt negativo, ma senza un vero prompt negativo!
Usando questo trucco intelligente, Lora dice a Flux di generare tutto tranne un tipico volto Flux. Di conseguenza, otterremo bellissimi volti unici ogni volta!
Perché Lora e non trucchi come Guideline inferiore?
Le persone vogliono volti diversi con alta guida per mantenere alta aderenza al prompt e qualità dell'immagine, perciò interventi a livello dello spazio latente sono ottimali.
In cosa differisce dalle altre Lora per personaggi?
Mentre altre Lora introducono i propri "samefaces", questa Lora dice a Flux cosa NON deve esserci nella generazione, non cosa aggiungere. Di conseguenza, questa Lora diversifica l'aspetto delle persone, invece di ridurlo ulteriormente.
Come è stata realizzata la Lora?
All'inizio ero deluso perché nulla funzionava. Stavo per abbandonare il progetto, poi ho provato ad addestrare la Lora con solo 2 layer, e improvvisamente durante i test ho visto volti bellissimi e con un aspetto autentico, distante da Flux.
Cosa succede dopo?
Ho molto da sperimentare. Devono essere testati diversi tassi di apprendimento, layer e rank per migliorare la qualità. La fusione di varianti diverse di Lora potrebbe risolvere i problemi con gli artefatti a valori più alti. Farò una versione migliore se questa Lora riceverà abbastanza interesse.
Attendo con interesse il vostro feedback, poiché questo modello è altamente sperimentale. Ogni commento è apprezzato e spero che aiuti a migliorare il modello.
ringraziamenti speciali a Ostris per AI-Toolkit
Dettagli del Modello
Tipo di modello
Modello base
Versione del modello
Hash del modello
Parole addestrate
Creatore
Discussione
Per favore log in per lasciare un commento.
