EnvyBetterHands LoCon - beta2
Powiązane słowa kluczowe i tagi
Zalecane podpowiedzi
nice hands,perfect hands,beautiful hands,fingernails
(masterpiece,best quality:1.3),nice hands
Zalecane negatywne podpowiedzi
extra fingers,deformed hands,polydactyl:1.5,worst quality, low quality, poor quality, bad quality:1.35
deformed hands,polydactyl:1.3),(worst quality,low quality,poor quality,bad quality:1.35)
Zalecane parametry
samplers
steps
cfg
resolution
vae
other models
Zalecane parametry wysokiej rozdzielczości
upscaler
upscale
steps
denoising strength
Wskazówki
Siła powinna być ustawiona około 1.0.
Dowolnie mieszaj z innymi LoRA dla lepszych wyników.
Unikaj używania negatywnych osadzeń takich jak badhandv4 do poprawy rąk.
Eksperymentuj z dynamicznym thresholdingiem dla lepszych efektów.
Najważniejsze informacje o wersji
Rozpoczęto trening od nowa, ponieważ okazuje się, że trening na vanilla 1.5 jest lepszy pod względem tworzenia modeli, które nie przesadzają z efektami i nie zmieniają stylu tak bardzo. Ta nowa wersja nadal wymaga więcej treningu, więc nie jest jeszcze tak skuteczna jak stara, ale na ogół poprawia efekty i działa z wieloma modelami, nie zmieniając stylu, więc myślę, że to właściwy kierunek. Będę eksperymentować z promptami i zaktualizuję główny opis o porady.
Sponsorzy twórcy
Używam Lora Block Weight. Sądzę, że można również korzystać z Additional Networks oraz SD Webui Lycoris.
Ten model to LoCon. MUSISZ zainstalować rozszerzenie Lycoris, aby go załadować.
Używam Lora Block Weight. Wierzę, że można też użyć Additional Networks oraz SD Webui Lycoris.
AKTUALIZACJA 27.04.2023: Osiągnąłem plateau w treningu, więc dodaję do zestawu danych więcej obrazów, w tym trudniejsze takie jak splecione palce. Prawdopodobnie będę musiał jeszcze bardziej obniżyć współczynnik uczenia, więc od teraz proces może być wolniejszy. Będę informować na bieżąco o postępach.
Wskazówki dotyczące promptów dla beta 2:
To całkowicie nowy trening oparty na vanilla Stable Diffusion 1.5. Zrobiłem to na podstawie rady innego entuzjasty i jest zaskakująco bardziej kompatybilny z różnymi modelami. Nie zmienia stylu twojego modelu wcale, jak dotąd mogę stwierdzić, i naprawdę wpływa tylko na ręce, czasem na ramiona, pozostawiając resztę nienaruszoną.
Najlepiej działa przy sile 1, choć zwiększenie jej powyżej (1.5, 2 itd.) może pomóc na niektórych obrazach kosztem pogorszenia innych. Nie ma potrzeby zmieniać skali CFG, bo nie powoduje przegrzewania wyników na tych poziomach.
Można dowolnie mieszać go z innymi LoRA.
Najlepsze efekty uzyskałem dodając "ładne ręce, idealne ręce" do promptu pozytywnego (zwiększanie wagi pogarsza efekty) oraz "(dodatkowe palce, zdeformowane ręce, polidaktylia:1.5)" do promptu negatywnego. Dotyczy to EnvyMix v1 (i prawdopodobnie RevAnimated), ale efekty mogą się różnić przy innych modelach.
Negatywne osadzenia „Bad hands” wydają się pogarszać efekt, choć nie testowałem tego dokładnie.
Jak zwykle, to nie zdziała cudów, ale zauważyłem, że na dużej liczbie obrazów ogólnie poprawia jakość. Mam nadzieję, że poprawi się to jeszcze po kilku kolejnych nocach treningu.
Wskazówki dotyczące promptów dla alpha 3 i beta 1:
Ta rada jest dla RevAnimated 1.2. Efekty mogą się różnić z innymi modelami.
Nadmiernie wzmacnia niektóre elementy, ale siła powinna być ustawiona na 1.0, aby działało dobrze. Można to obejść zmniejszając CFG do około 5 lub 6. Miałem dobry efekt używając rozszerzenia dynamic thresholding i ustawiając je na mimic CFG 5, a następnie CFG do 9 lub 10 i efekt jest dobry.
Próbowałem użyć tego modelu z inną LoRA i uzyskałem dziwne wyniki, więc tu efekt może się różnić. Obecnie próbuję, aby działało stabilnie w prostych zastosowaniach.
Dziwnie, ale wydaje mi się, że jest trochę gorzej z rękami w neutralnych pozycjach, ale zauważalnie lepiej w bardziej skomplikowanych interakcjach, jak trzymanie przedmiotów (stąd wiele zdjęć kowali i bibliotekarzy na przykładach).
Zachowaj proste prompt, wtedy efekty są lepsze.
W RevAnimated zwykle uzyskuję 1-2 użyteczne obrazy na każde 8, a reszta jest bliska i często można ją poprawić inpaintingiem.
Wskazówki dotyczące promptów dla alpha 2:
Model zyskuje na sile i najlepiej działa około siły 1. Ustawienie na 1.3 jak w poprzedniej wersji powoduje pogorszenie efektów.
Mój prompt negatywny to nadal "(dodatkowe palce, zdeformowane ręce:1.15), (najgorsza jakość, niska jakość, słaba jakość, zła jakość:1.35)"
Dobry efekt miałem, wpisując po prostu "ładne ręce" w głównym prompt.
Wskazówki dotyczące promptów dla alpha 1:
W twoim prompcie powinny się znaleźć słowa: "piękne ręce, idealne ręce, paznokcie". Najlepsze efekty miałem, gdy były gdzieś w środku i bez specjalnego podkreślenia.
LoCon alpha1 działa najlepiej przy sile około 1.3 (testowałem na RevAnimated 1.1, efekty mogą się różnić dla innych modeli)
Nie używaj negatywnych osadzeń do poprawy rąk. Po usunięciu badhandv4 z promptu negatywnego wyraźnie się poprawiło. Możesz spróbować bez żadnych negatywnych osadzeń. Nie korzystam z nich już od jakiegoś czasu.
Mój prompt negatywny to: "(dodatkowe palce, zdeformowane ręce:1.15), (najgorsza jakość, niska jakość, słaba jakość, zła jakość:1.35)", uzyskany po wielu eksperymentach z indywidualnym dostosowaniem sił i terminów. Powinno to dobrze działać.
Daje mi to nadzieję, że istnieje realna szansa na rozwiązanie problemu rąk w SD 1.5. Nawet przy dobrym promptowaniu rezultaty nie są idealne, ale bardzo bliskie. Uważam to za zakończone, gdy będzie tworzyć poprawne ręce bez dodawania czegokolwiek do promptu pozytywnego czy negatywnego.
Wracając do standardowego pliku readme...
Testuję teorię, że powodem, dla którego ręce w MidJourney są teraz dużo lepsze, jest to, iż poświęcili czas na specyficzne wytrenowanie sieci na wysokiej jakości zestawie zdjęć rąk, a nikt inny tego nie próbował. Ta LoRA zdecydowanie nie osiąga jeszcze poziomu MidJourney, ale trenuję ją od kilku nocy i dodaję do zestawu dane, tam gdzie jest to potrzebne, a jakość widocznie się poprawia. Dlatego publikuję to już teraz, aby ludzie mogli zacząć używać. Uważaj to jako wczesną alfę – przestanę aktualizować, gdy się przestanie poprawiać.
Przykładowe obrazy są wyselekcjonowane. Nie oczekuj, że ten model poprawi wszystkie wygenerowane ręce. Może nawet pogorszyć niektóre, więc oceniaj jego użyteczność na dużej liczbie obrazów, a nie na pojedynczym. Jeśli u ciebie działa jak u mnie, wiele wyników będzie tej samej albo lepszej jakości (niektóre jednak będą po prostu złe na różne sposoby).
Szczegóły modelu
Dyskusja
Proszę się log in, aby dodać komentarz.

