SameFace Fix [Flux Lora] - v0.1

Wichtig: Dieses Lora sollte mit einem NEGATIVEN Gewicht verwendet werden.

Außerdem: Das Modell zielt nur darauf ab, das Aussehen von Frauen zu diversifizieren. Ich plane später ein separates Modell für Männer (und besonders Männer mit Bart).

Auch eine coole Tatsache: Die Größe des Lora beträgt nur 4 MB (es ist auf 2 Blöcke mit hohem Rang begrenzt).

• Also, was ist ein „Sameface“?

Es ist ein häufiges Problem in generativer KI, bei dem das Modell Personen mit identischem Aussehen erzeugt. Anders als bei SD1.5/SDXL ist dies hier nicht nur das Ergebnis eines divergierenden Datensatzes, der zu einem einzigen Token wie „Frau“ zusammenläuft. Bei Flux wurden Dev/Schnell aus der Pro-Version destilliert, was zu einem Verlust an Vielfalt führt.

• Warum negatives Gewicht verwenden?

Lora wurde mit den generischsten Fotos von Frauen trainiert, die Flux erzeugt.

Wenn man dieses Lora dann mit einem NEGATIVEN Gewicht anwendet, funktioniert es wie eine Art negativer Prompt, aber ohne einen expliziten negativen Prompt!

Durch diesen cleveren Trick sagt das Lora Flux im Grunde, alles zu generieren außer einem typischen Flux-Gesicht. Und als Ergebnis erhalten wir jedes Mal schöne einzigartige Gesichter!

• Warum Lora und nicht Tricks wie niedrigere Guidance?

Die Leute wollen vielfältige Gesichter mit hoher Guidance, um eine hohe Übereinstimmung mit dem Prompt und eine gute Bildqualität zu bewahren. Deshalb sind Eingriffe auf der latenten Raumebene optimal.

• Wie unterscheidet es sich von anderen Charakter-Loras?

Während andere Loras ihre eigenen „Samefaces“ einführen, sagt dieses Lora Flux nur, was NICHT in der Generierung enthalten sein soll, nicht was hinzugefügt werden soll. Dadurch diversifiziert dieses Lora das Aussehen von Menschen, anstatt es noch weiter einzugrenzen.

• Wie wurde das Lora eigentlich hergestellt?

Zunächst war ich enttäuscht, weil nichts funktionierte. Ich wollte dieses Projekt fast aufgeben, aber dann versuchte ich, das Lora mit nur 2 Schichten zu trainieren, und plötzlich traf ich während der Tests auf schöne Gesichter mit einem authentischen, Abstand von Flux wirkenden Aussehen.

• Was kommt als Nächstes?

Ich habe noch viel zu experimentieren. Unterschiedliche Lernraten, Schichten und Ränge müssen getestet werden, um die Qualität zu verbessern. Das Verschmelzen verschiedener Lora-Varianten könnte die Probleme mit Artefakten bei höheren Werten beheben. Ich werde sicherstellen, eine bessere Version zu erstellen, falls dieses Lora genug Interesse findet.

Ich freue mich wirklich auf euer Feedback, da dieses Modell sehr experimentell ist. Jegliches Feedback ist willkommen und wird hoffentlich helfen, das Modell zu verbessern.

Besonderer Dank an Ostris für AI-Toolkit