Questo modello è un LoCon. DEVI installare l'estensione Lycoris per poterlo caricare.

Sto usando Lora Block Weight. Credo che tu possa anche usare Additional Networks e SD Webui Lycoris.

AGGIORNAMENTO 27/04/2023: Ho raggiunto un plateau nell'addestramento, quindi sto aggiungendo molte più immagini al dataset, inclusi alcuni elementi più complessi come dita intrecciate. Probabilmente dovrò ulteriormente abbassare il learning rate, quindi le cose potrebbero procedere più lentamente da ora in poi. Terrò tutti aggiornati sul progresso.

Consigli per prompt per beta 2:

• Questo è un addestramento completamente nuovo basato su vanilla Stable Diffusion 1.5. L'ho fatto su consiglio di un altro appassionato, ed è sorprendente quanto sia più compatibile con diversi modelli. Non altera lo stile del tuo modello per niente, per quanto posso dire, e influisce principalmente sulle mani e occasionalmente sulle braccia, lasciando tutto il resto intatto.

• Funziona meglio con una forza di 1, anche se alzarla oltre (1.5, 2, ecc.) può aiutare con alcune immagini a scapito di altre. Non c'è bisogno di modificare la scala CFG, perché a questi livelli non provoca problemi di sovracottura.

• Puoi combinarlo liberamente con altri LoRA.

• Ho ottenuto i migliori risultati inserendo "nice hands, perfect hands" nel prompt positivo (aumentare il peso peggiora la situazione) e "(extra fingers, deformed hands, polydactyl:1.5)" nel prompt negativo. Questo vale per EnvyMix v1 (e probabilmente RevAnimated), ma i risultati possono variare con altri modelli.

• "Bad hands" nelle embedding negative sembrano peggiorare le cose, anche se non l'ho testato approfonditamente.

• Come di consueto, questo non fa miracoli, ma noto che su molte immagini migliora generalmente la qualità media. Speriamo che migliori ulteriormente con qualche altro ciclo di addestramento notturno.

Consigli per prompt per alpha 3 e beta 1:

• Nota che questi consigli sono per RevAnimated 1.2. I risultati possono variare con altri modelli.

• Porta un po’ a sovracucinare, ma con forza impostata a 1.0 funziona davvero bene. Puoi compensare riducendo il valore CFG a 5 o 6 circa. Ho avuto buoni risultati abilitando l'estensione dynamic thresholding e impostandola per imitare il CFG 5, quindi posso mettere la CFG a 9 o 10 e i risultati sono buoni.

• Ho provato ad usarlo con un altro LoRA ottenendo risultati piuttosto strani, quindi i risultati possono variare anche lì. Al momento sto cercando di farlo funzionare in modo coerente in casi semplici.

• Stranamente, credo che sia peggiorato un po' sulle mani in posizioni neutre, ma è decisamente meglio in interazioni più complesse, come tenere oggetti (per questo ho molte immagini di fabbri e bibliotecari negli esempi).

• Tieni i prompt semplici e tende a funzionare meglio.

• Con RevAnimated, ottengo solitamente 1 o 2 immagini utilizzabili ogni 8, con tante altre quasi buone che possono probabilmente essere aggiustate con l'inpainting.

Consigli per prompt per alpha 2:

• Sta diventando più forte, funziona meglio con forza intorno a 1. Impostarlo a 1.3 come la versione precedente peggiora l'aspetto.

• Il mio prompt negativo è ancora "(extra fingers, deformed hands:1.15), (worst quality, low quality, poor quality, bad quality:1.35)"

• Ho ottenuto buoni risultati semplicemente mettendo "nice hands" nel prompt principale.

Consigli per prompt per alpha 1:

• Il tuo prompt dovrebbe contenere queste parole: "beautiful hands, perfect hands, fingernails". Ho avuto i migliori risultati mettendole verso il centro, senza enfasi.

• La LoCon alpha1 funziona meglio con forza intorno a 1.3 (su RevAnimated 1.1, dove sto testando adesso -- i risultati possono variare con altri modelli)

• Non usare embedding negative per migliorare le mani. Quando ho rimosso badhandv4 dal prompt negativo, le cose sono migliorate notevolmente. Puoi provare senza nessuna embedding negativa. Io non le uso da un po' di tempo.

• Il mio prompt negativo è: "(extra fingers, deformed hands:1.15), (worst quality, low quality, poor quality, bad quality:1.35)", risultato di molte sperimentazioni regolando forza e termini uno alla volta. Dovrebbe funzionare abbastanza bene.

• Tutto questo mi dà speranza che si possa risolvere il problema delle mani su SD 1.5. Anche con un buon prompting, generalmente non ottengo risultati perfetti, ma siamo vicini. Considererò il lavoro finito quando creerà mani ben formate senza dover aggiungere nulla ai prompt positivi o negativi.

Ora torniamo alla tua solita lettura del readme...

Sto testando la teoria che forse il motivo per cui le mani di MidJourney sono molto migliori ora è che hanno dedicato tempo specificamente ad addestrare una rete su un set di immagini di mani di alta qualità, e letteralmente nessun altro ha provato a farlo. Questa LoRA non è ancora al livello di MidJourney, ma la sto addestrando da diverse notti aggiungendo al dataset dove sembra carente, e la qualità sembra migliorare costantemente. Perciò la pubblico ora così la gente può cominciare a usarla. Considerala una alpha iniziale – smetterò di aggiornare solo quando non migliorerà più.

Le immagini di esempio sono selezionate con cura. Per favore, non aspettarti che questo modello migliori tutte le tue generazioni di mani. Potrebbe anche peggiorarne alcune, quindi valuta la sua utilità su un gran numero di immagini, non solo una. Se funziona per te come per me, molti risultati dovrebbero essere di qualità uguale o superiore (alcuni saranno solo peggiori in modi diversi).