Este modelo é um LoCon. Você DEVE instalar a extensão Lycoris para que ele carregue.

Estou usando Lora Block Weight. Acredito que você também possa usar Additional Networks e SD Webui Lycoris.

ATUALIZAÇÃO 27/04/2023: Cheguei a um platô no treinamento, então estou no processo de adicionar muitas mais imagens ao conjunto de dados, incluindo algumas mais complicadas como dedos entrelaçados. Provavelmente terei que diminuir ainda mais a taxa de aprendizado, então as coisas podem ficar mais lentas a partir daqui. Vou manter todos informados conforme o progresso.

Conselhos de prompt para beta 2:

• Este é um treino completamente novo sobre o vanilla Stable Diffusion 1.5. Fiz isso baseado no conselho de um entusiasta, e é surpreendente o quanto ele é mais compatível com modelos diferentes. Ele não altera o estilo do seu modelo de forma alguma, pelo que consegui perceber, e realmente afeta apenas as mãos e ocasionalmente os braços, deixando o restante intocado.

• Parece funcionar melhor com força em 1, embora aumentar para valores mais altos (1.5, 2, etc.) possa ajudar em algumas imagens, ao custo de piorar outras. Não há necessidade de mexer na escala CFG, pois isso não causa exageros nesses níveis.

• Combine livremente com outras LoRAs.

• Obtive os melhores resultados colocando "nice hands, perfect hands" no prompt positivo (aumentar o peso piora as coisas), e "(extra fingers, deformed hands, polydactyl:1.5)" no prompt negativo. Isso é com EnvyMix v1 (e provavelmente RevAnimated), mas seus resultados podem variar para outros modelos.

• Embeddings negativos de "bad hands" parecem piorar, embora eu não tenha testado extensivamente.

• Como de costume, isso não fará milagres, mas percebo que, em muitas imagens, melhora as coisas em geral. Espero que continue melhorando com mais algumas noites de treinamento.

Conselhos de prompt para alpha 3 e beta 1:

• Note que esse conselho é para RevAnimated 1.2. Seus resultados podem variar com outros modelos.

• Ele tende a exagerar um pouco, mas você precisa que a força esteja definida em 1.0 para funcionar bem. Você pode contornar isso reduzindo o valor CFG para cerca de 5 ou 6. Tive bons resultados ativando a extensão de limiar dinâmico e configurando-a para imitar CFG 5, assim posso definir meu valor CFG para 9 ou 10 e os resultados ficam bons.

• Usei com outra LoRA e obtive resultados estranhos, então pode variar também aí. No momento, estou tentando fazê-lo funcionar consistentemente em um caso simples de uso.

• Curiosamente, acho que ele regrediu um pouco nas mãos em posições neutras, mas está visivelmente melhor em interações mais complicadas, como segurar objetos (por isso tenho muitas imagens de ferreiros e bibliotecários nos exemplos).

• Mantenha seus prompts simples, e tende a dar resultados melhores.

• Com RevAnimated, geralmente obtenho 1 ou 2 imagens utilizáveis a cada 8, com várias outras que estão próximas e podem ser corrigidas com inpainting.

Conselhos de prompt para alpha 2:

• Está ficando mais forte agora, funciona melhor com força ao redor de 1. Definir em 1.3 como a versão anterior deixará as coisas ruins.

• Meu prompt negativo ainda é "(extra fingers, deformed hands:1.15), (worst quality, low quality, poor quality, bad quality:1.35)"

• Tive sorte apenas colocando "nice hands" no prompt principal.

Conselhos de prompt para alpha 1:

• Seu prompt deve conter as palavras: "beautiful hands, perfect hands, fingernails". Tive mais sorte com elas mais para o meio e sem ênfase.

• O LoCon alpha1 parece funcionar melhor com força em torno de 1.3 (no RevAnimated 1.1, onde estou testando agora -- pode variar com outros modelos)

• Não use embeddings negativos para melhorar mãos. Quando removi badhandv4 do meu prompt negativo, as coisas melhoraram visivelmente. Talvez você queira tentar sem nenhum embedding negativo. Não uso há um tempo.

• Meu prompt negativo é: "(extra fingers, deformed hands:1.15), (worst quality, low quality, poor quality, bad quality:1.35)", obtido após muito experimento ajustando forças e termos um a um. Deve funcionar razoavelmente bem.

• Tudo isso me dá esperança de que existe uma chance real de resolver as mãos no SD 1.5. Mesmo com bons prompts, geralmente não obtenho resultados perfeitos, mas estão perto. Vou considerar isso concluído quando criar mãos bem formadas sem precisar adicionar nada no prompt positivo ou negativo.

Agora voltando ao seu readme normalmente programado...

Estou testando a teoria de que talvez o motivo pelo qual as mãos do MidJourney estão muito melhores agora seja porque eles dedicaram tempo para treinar especificamente uma rede com um conjunto de imagens de alta qualidade de mãos, e literalmente ninguém mais tentou. Esta LoRA definitivamente ainda não chegou ao nível do MidJourney, mas tenho treinado durante várias noites e adicionando ao conjunto de dados onde parece deficiente, e a qualidade parece estar melhorando constantemente. Assim, vou postar isso agora para que as pessoas possam começar a usar. Considere isto uma alpha inicial -- só vou parar de atualizar quando não melhorar mais.

As imagens de exemplo são escolhidas criteriosamente. Por favor, não espere que este modelo melhore todas as suas gerações de mãos. Pode até piorar algumas, então você deve avaliar sua utilidade em muitas imagens e não apenas uma. Se funcionar para você como funciona para mim, muitos de seus resultados devem ser da mesma qualidade ou melhor (alguns apenas ruins de formas diferentes).