Add Dental Braces

Hinweis: Alle Benutzer werden dringend empfohlen, auf Version 3 oder Version 4 zu aktualisieren. Version 1 ist von schlechter Qualität.

Ziel:

Dieses Modell zielt darauf ab, fotorealistische Zahnspangen auf die Zähne von Motiven in generierten Bildern hinzuzufügen. Die Zahnspangen sollen natürlich wirken, indem sie genau dimensioniert und ausgerichtet sind, und dabei auf Eingaben reagieren, die die Farbe der Brackets (z.B. Gold oder Silber) und die Farbe der Bänder spezifizieren.

Aktuelle Funktionalität:

Es ist nicht perfekt, aber Version 4 funktioniert und tut dies meistens sehr gut. Es funktioniert gut sowohl bei Männern als auch Frauen. Obwohl es trainiert wurde, fotorealistische Zahnspangen auf fotorealistischen Bildern hinzuzufügen, habe ich festgestellt, dass es Zahnspangen nahezu allem hinzufügen kann, Robotern, Tieren usw. Außerdem funktioniert es gut in anderen Stilen, nicht nur bei Fotos, sondern auch bei Zeichnungen und Cartoon-Stilen.

Trainingsdaten:

Version 4 dieses Modells wurde mit einer Sammlung von 128 hochauflösenden (1024 x 1024) Fotos echter Zahnspangen trainiert, mit 6912 Trainingsschritten über 54 Epochen. Der Datensatz besteht hauptsächlich aus Bildern, die verschiedene Arten von Zahnspangen und unterschiedliche Bandfarben zeigen.

Beispiel-Eingaben

Da der Plan ist, mit der LORA die Farbe der Brackets und Drähte (z.B. Gold oder Silber) sowie das Material (Plastik oder Metall) angeben zu können, habe ich begonnen, in den Labels für jede Eingabe spezifische Informationen über die Farbe der Brackets, Drähte und Bänder hinzuzufügen.

Bisher funktioniert nur die Bandfarbe. Zum Teil, weil der aktuelle Datensatz nur Beispiele mit silbernen Brackets und silbernen Bändern enthält.

Während der Tests von Version 4 bemerkte ich, dass ich bessere und konsistentere Ergebnisse erzielte, wenn ich diese Informationen auch im Prompt spiegelte.

Folgendes etwa:

adddentalbraces, ein [Person/Tier/Objekt] [Optionales Alter] [Wenn für eine Person, man oder frau] mit [seinen/ihren] Zähnen mit [Farbe] Bändern, silbernen Brackets und einem silbernen Draht.

Beispiele:

adddentalbraces, ein 20-jähriger Mann mit Zahnspangen an seinen Zähnen mit roten Bändern, silbernen Brackets und einem silbernen Draht.

adddentalbraces, eine 20-jährige Frau mit Zahnspangen an ihren Zähnen mit roten Bändern, silbernen Brackets und einem silbernen Draht.

Zur Klarstellung: Sie müssen nicht zwingend auf diese Weise prompten, aber im Test erzielte ich damit konsistent qualitativ hochwertigere Ergebnisse, da Prompts in diesem Stil den vielen Labels im Datensatz ähnlicher sind und die Labels Angaben wie Farbe der Brackets und Drahtfarbe enthalten.

A/B-Test Ergebnisse:

Version 3 vs. Version 4

Verbesserung der Hauttextur:

Version 3 zeigte eine Tendenz, eine retuschierte Optik auf der Gesichtshaut zu erzeugen. Im Gegensatz dazu wurden mit Version 4 Regularisierungsbilder in den Datensatz aufgenommen, um dieses Problem gezielt anzugehen.

• Nach dem Training durchgeführte A/B-Tests zeigten erhebliche Verbesserungen in diesem Bereich.

Verbesserte Details im Datensatz:

Version 4 enthält ebenfalls Verbesserungen im Datensatz, um detailliertere Darstellungen echter Zahnspangen zu bieten.

• A/B-Tests zeigten, dass Version 4 gelegentlich subtile Merkmale bei den Zahnspangen hinzufügte, wie Haken für Gummibänder, die in Version 3 nicht vorhanden waren.

Darstellung wechselnder Bandfarben:

Version 4 beinhaltet zudem eine größere Bandbreite an Beispielen für Zahnspangen mit wechselnden Bandfarben im Datensatz.

• A/B-Tests bewiesen, dass Version 4 bei Prompts mit wechselnden Bandfarben (z.B. „mit Bändern, die zwischen Blau und Grün wechseln“) besser abschnitt als Version 3.

Zusammenfassung der Gesamtleistung:

Zusammenfassend erzielte Version 4 etwas bessere Gesamtergebnisse und zeigte weniger Anomalien, wie z.B. Bracket-Bereiche, die eigentlich nicht vorhanden sein sollten. Im Gegensatz dazu erzeugte Version 3 gelegentlich bessere Bänder, jedoch auf Kosten der reduzierten Gesamtbildqualität.

Tipps für beste Ergebnisse

Verwenden Sie konkrete Beschreibungen für Alter, Geschlecht und Materialien der Zahnspangen, um die Realismus zu verbessern.

Folgen Sie dem Prompt-Stil:

adddentalbraces, ein [Person/Tier/Objekt] [Optionales Alter] [Wenn für eine Person, man oder frau] mit [seinen/ihren] Zähnen mit [Farbe] Bändern, silbernen Brackets und einem silbernen Draht.

Oder geben Sie zumindest eine Bandfarbe an und benutzen Sie die Phrase „mit silbernen Brackets und einem silbernen Draht.“

Einfache Prompts wie

adddentalbraces, Eine 25-jährige Frau mit Zahnspangen an ihren Zähnen.

erzielen beständig sehr zufriedenstellende Ergebnisse und erzeugen hauptsächlich Kopfporträts. Die Zahnspangen wirken in diesem Nahaufnahme-Stil am ästhetischsten, und die LORA erstellt Bilder meist in diesem Stil, sofern nicht explizit anders verlangt.

Die LORA kann auch komplexere Prompts verarbeiten und zuverlässig die Zahnspangen integrieren, obwohl bei Ganzkörper- oder Distanzaufnahmen die Qualität der hinzugefügten Zahnspangen abnehmen kann. Der aktuelle Datensatz enthält nicht genug Beispiele von Zahnspangen aus der Entfernung, was gelegentlich zu Inkonsistenzen oder ungenauen Darstellungen führt. (Ich plane, zusätzliche Beispiele von Zahnspangen aus größerer Entfernung in der nächsten Version des Datensatzes aufzunehmen, um diesen Aspekt zu verbessern, aber das kann Zeit benötigen, um Bilder ausreichender Qualität zu beschaffen oder zu erzeugen. Ich bin sehr sorgfältig bei den Bildern im Datensatz und bin fest davon überzeugt, dass die Qualität der Daten der wichtigste Faktor für qualitativ hochwertige Resultate aus dem Training ist.)

Bleiben Sie dran für Updates! Nutzerfeedback ist stets willkommen, lassen Sie mich wissen, was funktioniert und was verbessert werden muss.