modelle/DPO (Direct Preference Optimization) LoRA für XL und 1.5 - OpenRail++ - SDXL - V1.0

DPO (Direct Preference Optimization) LoRA für XL und 1.5 - OpenRail++ - SDXL - V1.0

|
7/26/2025
|
1:19:51 PM
| Discussion|
0
Eine weibliche Kriegerin in silberner Rüstung steht im Wald und hält ein leuchtendes Schwert sowie einen blauen Schild mit rotem Emblem.
Makroaufnahme einer außerirdischen Kreatur mit irisierenden blauen und grünen Federn, großen ausdrucksvollen Augen und leuchtenden biolumineszenten Akzenten, die auf einer roten Alienpflanze sitzt.
Junge Frau mit blondem Pixie-Haarschnitt sitzt auf einem roten Sessel und trägt eine Schuluniform mit roter Krawatte in einem Wohnzimmer mit Pflanzen und roten Vorhängen.
Ein detailliertes, neo-byzantinisches rundes Mosaik mit Rubin-, Saphir-, Amethyst- und Goldelementen in einem kunstvollen Blumen- und Fraktalmuster mit silbernen Blättern.
Ein scharfer Berggipfel, der sich als Silhouette gegen einen feurigen orangefarbenen Sonnenuntergangshimmel abzeichnet, gespiegelt in einem klaren See mit sichtbaren Felsen unter der Oberfläche.
Buntes niedliches Robotercharakter mit mehreren Armen, erzeugt mit Stable Diffusion KI.
Ein Bergtempel umgeben von nebligen Gipfeln und ruhigem Wasser, KI-generiert mit Stable Diffusion.

Empfohlene Prompts

RAW photo, a close-up picture of a cat, a close-up picture of a dog, orange eyes, blue eyes, reflection in it's eyes

Empfohlene Parameter

samplers

DPM2

steps

25

cfg

5

Ersteller-Sponsoren

Was ist DPO?

DPO steht für Direct Preference Optimization, der Name für den Prozess, bei dem ein Diffusionsmodell basierend auf von Menschen ausgewählten Bildern feinabgestimmt wird. Meihua Dang et. al. haben Stable Diffusion 1.5 und Stable Diffusion XL mit dieser Methode und dem Pick-a-Pic v2 Dataset trainiert, welches unter https://huggingface.co/datasets/yuvalkirstain/pickapic_v2 zu finden ist, und darüber eine Arbeit verfasst unter https://huggingface.co/papers/2311.12908.

Was bewirkt es?

Die trainierten DPO-Modelle haben sich als fähig erwiesen, Bilder mit höherer Qualität als ihre untrainierten Gegenstücke zu erzeugen, mit einem deutlichen Schwerpunkt auf die Einhaltung des Prompts durch das Modell. Diese LoRA können diese Prompt-Genauigkeit auf andere feinabgestimmte Stable Diffusion-Modelle übertragen.

Wer hat das trainiert?

Diese LoRA basieren auf den Arbeiten von Meihua Dang (https://huggingface.co/mhdang) bei

https://huggingface.co/mhdang/dpo-sdxl-text2image-v1 und https://huggingface.co/mhdang/dpo-sd1.5-text2image-v1, lizenziert unter OpenRail++.

Wie wurden diese LoRA erstellt?

Sie wurden mit Kohya SS erstellt, indem sie aus anderen OpenRail++ lizenzierten Checkpoints auf CivitAI und HuggingFace extrahiert wurden.

1.5: https://civitai.com/models/240850/sd15-direct-preference-optimization-dpo extrahiert von https://huggingface.co/fp16-guy/Stable-Diffusion-v1-5_fp16_cleaned/blob/main/sd_1.5.safetensors.

XL: https://civitai.com/models/238319/sd-xl-dpo-finetune-direct-preference-optimization extrahiert von https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0/blob/main/sd_xl_base_1.0_0.9vae.safetensors

Diese sind ebenfalls auf HuggingFace unter https://huggingface.co/benjamin-paine/sd-dpo-offsets/ verfügbar.

Zurück
NightVisionXL - NightVisionXL_v9.0.0
Weiter
CHOo1NE | Shiiro's Styles - v1.0

Modell-Details

Modelltyp

LORA

Basismodell

SDXL 1.0

Modellversion

SDXL - V1.0

Modell-Hash

c100ec5708

Ersteller

Diskussion

Bitte log in um einen Kommentar zu hinterlassen.

Modellsammlung - DPO (Direct Preference Optimization) LoRA for XL and 1.5 - OpenRail++

Bilder von DPO (Direct Preference Optimization) LoRA für XL und 1.5 - OpenRail++ - SDXL - V1.0

Eine weibliche Kriegerin in silberner Rüstung steht im Wald und hält ein leuchtendes Schwert sowie einen blauen Schild mit rotem Emblem.
Makroaufnahme einer außerirdischen Kreatur mit irisierenden blauen und grünen Federn, großen ausdrucksvollen Augen und leuchtenden biolumineszenten Akzenten, die auf einer roten Alienpflanze sitzt.
Junge Frau mit blondem Pixie-Haarschnitt sitzt auf einem roten Sessel und trägt eine Schuluniform mit roter Krawatte in einem Wohnzimmer mit Pflanzen und roten Vorhängen.
Ein detailliertes, neo-byzantinisches rundes Mosaik mit Rubin-, Saphir-, Amethyst- und Goldelementen in einem kunstvollen Blumen- und Fraktalmuster mit silbernen Blättern.
Ein scharfer Berggipfel, der sich als Silhouette gegen einen feurigen orangefarbenen Sonnenuntergangshimmel abzeichnet, gespiegelt in einem klaren See mit sichtbaren Felsen unter der Oberfläche.
Buntes niedliches Robotercharakter mit mehreren Armen, erzeugt mit Stable Diffusion KI.
Ein Bergtempel umgeben von nebligen Gipfeln und ruhigem Wasser, KI-generiert mit Stable Diffusion.

Bilder mit dpo

Eine weibliche Kriegerin in silberner Rüstung steht im Wald und hält ein leuchtendes Schwert sowie einen blauen Schild mit rotem Emblem.
Ein scharfer Berggipfel, der sich als Silhouette gegen einen feurigen orangefarbenen Sonnenuntergangshimmel abzeichnet, gespiegelt in einem klaren See mit sichtbaren Felsen unter der Oberfläche.

Bilder mit lora

Ein weißhaariges Mädchen mit roten Augen, trägt ein schwarzes Outfit und einen goldenen stachelbesetzten Panzerhandschuh, hält ein rot leuchtendes Schwert und steht mitten im rollenden Nebel in einem Schwertgrab.
Ein Fantasy-Mann mit Dämonenflügeln kniet in einem blutroten See unter einem leuchtenden roten Mond, umgeben von Schwertern und dramatischer Beleuchtung.
Nahaufnahme einer dunklen Fantasy-Femelelfe mit weißem Haar, schwarzen Hörnern, bleicher Haut, die eine kunstvolle goldene Rüstung mit Totenkopf-Motiven trägt und ein rot leuchtendes Schwert hält.
Eine realistische Renaissance-Stil weibliche Elfe mit langen schwarzen Haaren, grünen Augen und spitzen Ohren, die ein langes schwarzes Kleid mit silbernen Knöpfen trägt und einen knorrigen Stab auf einem nebelverhangenen Friedhof hält.
Ein von KI generiertes Bild mit Stable Diffusion, das einen großen Zauberer in einer blauen Robe mit einer mystischen Gestalt hinter ihm zeigt.
Anime-Stil Darstellung einer weiblichen Kriegerin mit grünem Haar, die ein türkisfarbenes Outfit mit braunem Gürtel, lila Umhang sowie orangefarbene Handschuhe und Stiefel trägt. Das Bild wurde mit stable diffusion generiert.
Eine Vintage-Frau mit roten Haaren in einem schwarzen Kleid hält zwei Totenschädel und lacht freudig. Dies ist ein KI-generiertes Bild mit Stable Diffusion.
Samurai, der nachts in einer schwach beleuchteten Gasse steht, erstellt von KI mit Stable Diffusion.
Ein realistisches 3D-Modell eines Mannes in Uniform, erstellt mit Stable Diffusion.
Anime-Mädchen mit langem blondem Haar, das eine Kappe, ein orangefarbenes T-Shirt, weiße Hosen und rote Turnschuhe trägt und in einer urbanen Umgebung sitzt, erzeugt mit Stable Diffusion KI.

Bilder mit stable diffusion

Schulmädchen mit braunen Haaren, trägt eine beige Weste und einen blauen Rock, sitzt stilvoll auf einem Schulstuhl in einem Klassenzimmer mit durch Fenster einfallendem Sonnenlicht.
Vampirfrau mit roten Augen und Haaren im Schwarz-Rot-Thema, begrenzte Farbpalette, monochrom und Graustufen.
Anime-Mädchen mit gebräunter Haut in einem Sonnenblumenfeld, trägt Latzhose und Strohhut, lächelt den Betrachter mit leichtem Erröten an.
Künstlerische Darstellung eines Elfenmädchens in Innenräumen mit leuchtender volumetrischer Beleuchtung und großen Brüsten, das den Betrachter ansieht.
Anthro Fuchs-Mann mit Brille in einem Anzug, der einen blutigen Hammer hält.
Eine goth punk Lehrerin mit dunkelgrünen Haaren und Brille lehnt an einer Wand, trägt ein Lederkorsett und einen langen Rock, in einer Gasse mit Pflanzen.
Illustration von WeissSchnee mit weißen Haaren und einer kurvigen Figur, die ein detailliertes blau-weißes Outfit in einer verschneiten Stadtkulisse trägt.
Eine Sci-Fi Krieger-Hexe mit silbernem Haar, leuchtend pinken Augen und komplexen Tätowierungen, die eine Inquisitor-Tunika in einer hochkontrastreichen, theatralischen Szenerie trägt.
Anime-Stil goth punk Lehrerin mit roten Augen und Pixie-Schnitt, stehend in einer Gasse mit Schmetterlingen und Pflanzen.
Anime-Stil gothische Succubus mit grünen Augen im Latex-Bodysuit, mit dunkelblauen Haaren in einer Gasse mit Schmetterlingen.

Bilder mit Werkzeug

Eine gefellte humanoide Figur mit Rucksack und Axt, die eine postapokalyptische Landschaft durchquert. Dies ist ein KI-generiertes Bild mit Stable Diffusion.