SameFace Fix [Flux Lora] - v0.1

Importante: Este Lora deve ser usado com um peso NEGATIVO.

Além disso: o modelo visa diversificar a aparência somente das mulheres. Pretendo criar um modelo separado para homens mais tarde (especialmente homens com barba).

Outro fato interessante: o tamanho do Lora é apenas 4MB (limitado a 2 blocos com alta classificação).

• Então, o que é um "Sameface"?

É um problema comum em IA generativa, no qual o modelo gera pessoas com aparências idênticas. Diferente do SD1.5/SDXL, isso não é apenas resultado do conjunto de dados diverso convergir para um único token como "mulher". No Flux, Dev/Schnell foram destilados da versão Pro, resultando em perda de diversidade.

• Por que usar peso negativo?

O Lora foi treinado nas fotos mais genéricas de mulheres que o Flux gera.

Se você aplicar este Lora com peso NEGATIVO, ele funcionará como uma espécie de prompt negativo, mas sem prompt negativo explícito!

Usando esse truque inteligente, o Lora basicamente instrui o Flux a gerar qualquer coisa exceto um rosto típico do Flux. Como resultado, teremos rostos únicos e bonitos sempre!

• Por que usar Lora e não truques como diminuir a Guidance?

As pessoas querem rostos diversos com alta guidance para manter a aderência ao prompt e qualidade da imagem, por isso intervenções no espaço latente são ideais.

• Como ele difere de outros Loras de personagens?

Enquanto outros Loras introduzem seus próprios "samefaces", este Lora apenas diz ao Flux o que NÃO deve estar na geração, não o que adicionar. Assim, ele diversifica a aparência das pessoas em vez de restringi-la ainda mais.

• Como o Lora foi realmente feito?

No início fiquei desapontado porque nada funcionava. Quase abandonei o projeto, mas então tentei treinar o Lora com apenas 2 camadas e, de repente, durante os testes, encontrei rostos bonitos, com aparência autêntica e distante do Flux.

• E agora?

Tenho muito para experimentar. Taxas de aprendizado diferentes, camadas e classificações precisam ser testadas para melhorar a qualidade. Fundir variantes diferentes de Lora pode resolver problemas com artefatos em valores mais altos. Vou garantir uma versão melhor se este Lora tiver interesse suficiente.

Estou realmente ansioso pelo seu feedback, já que este modelo é altamente experimental. Qualquer feedback é bem-vindo e espero que ajude a melhorar o modelo.

Agradecimentos especiais a Ostris por AI-Toolkit