Animagine XL V3.1 - v3.1

Animagine XL 3.1 es una actualización de la serie Animagine XL V3, mejorando la versión previa, Animagine XL 3.0. Este modelo open-source de texto a imagen con temática anime ha sido mejorado para generar imágenes estilo anime con mayor calidad. Incluye una gama más amplia de personajes de series anime conocidas, un conjunto de datos optimizado y nuevas etiquetas estéticas para una mejor creación de imágenes. Construido sobre Stable Diffusion XL, Animagine XL 3.1 busca ser un recurso valioso para fans del anime, artistas y creadores de contenido, produciendo representaciones precisas y detalladas de personajes de anime.

Detalles del Modelo

• Desarrollado por: Cagliostro Research Lab

• En colaboración con: SeaArt.ai

• Tipo de modelo: Modelo generativo de texto a imagen basado en difusión

• Descripción del modelo: Animagine XL 3.1 genera imágenes anime de alta calidad a partir de prompts textuales. Posee anatomía de manos mejorada, comprensión avanzada de conceptos e interpretación avanzada de prompts.

• Licencia: Fair AI Public License 1.0-SD

• Ajustado a partir de: Animagine XL 3.0

Guías de Uso

Orden de Etiquetas

Para obtener resultados óptimos, se recomienda seguir la plantilla estructurada del prompt, ya que entrenamos el modelo de esta forma:

1girl/1boy, nombre del personaje, de qué serie, todo lo demás en cualquier orden.

Etiquetas Especiales

Animagine XL 3.1 utiliza etiquetas especiales para dirigir el resultado hacia calidad, clasificación, fecha de creación y estética. Aunque el modelo puede generar imágenes sin estas etiquetas, usarlas ayuda a lograr mejores resultados.

Modificadores de Calidad

Las etiquetas de calidad ahora consideran tanto puntuaciones como clasificaciones de post para asegurar una distribución equilibrada de calidad. Hemos refinado las etiquetas para mayor claridad, como cambiar "high quality" a "great quality".

Modificador de Calidad	Criterio de Puntuación
masterpiece	        > 95%
best quality	        > 85% & ≤ 95%
great quality	        > 75% & ≤ 85%
good quality	        > 50% & ≤ 75%
normal quality	        > 25% & ≤ 50%
low quality	        > 10% & ≤ 25%
worst quality	        ≤ 10%

Modificadores de Clasificación

También hemos simplificado las etiquetas de clasificación para mayor sencillez y claridad, estableciendo reglas globales aplicables a distintos modelos. Por ejemplo, la etiqueta "rating: general" ahora es simplemente "general", y "rating: sensitive" se ha condensado a "sensitive".

Modificador de Clasificación	    Criterio de Clasificación
safe	            General
sensitive	    Sensible
nsfw	            Cuestionable
explicit, nsfw	    Explícito

Modificador de Año

También redefinimos el rango de años para dirigir los resultados hacia estilos artísticos anime modernos o vintage con mayor precisión. Esta actualización simplifica los rangos, enfocándose en la relevancia para eras actuales y pasadas.

Etiqueta de Año	Rango de Año
newest	        2021 a 2024
recent	        2018 a 2020
mid	        2015 a 2017
early	        2011 a 2014
oldest	        2005 a 2010

Etiquetas Estéticas

Hemos mejorado nuestro sistema de etiquetado con etiquetas estéticas para refinar la categorización de contenido basada en el atractivo visual. Estas etiquetas se derivan de evaluaciones hechas por un modelo de clasificación de imágenes ViT (Vision Transformer) especializado, entrenado en datos de anime. Para esto, utilizamos el modelo shadowlilac/aesthetic-shadow-v2, que evalúa el valor estético del contenido antes del entrenamiento. Esto asegura que cada contenido no solo sea relevante y preciso, sino también visualmente atractivo.

Etiqueta Estética	       Rango de Puntuación
very aesthetic	       > 0.71
aesthetic	       > 0.45 & < 0.71
displeasing	       > 0.27 & < 0.45
very displeasing       ≤ 0.27

Configuración Recomendadas

Para guiar al modelo hacia imágenes con alta estética, utiliza prompts negativos como:

nsfw, lowres, (bad), text, error, fewer, extra, missing, worst quality, jpeg artifacts, low quality, watermark, unfinished, displeasing, oldest, early, chromatic aberration, signature, extra digits, artistic error, username, scan, [abstract]

Para resultados de mayor calidad, antepón los prompts con:

masterpiece, best quality, very aesthetic, absurdres

Se recomienda usar una guía de classifier-free (CFG Scale) baja de alrededor de 5-7, pasos de muestreo por debajo de 30 y usar Euler Ancestral (Euler a) como sampler.

Resolución Multi Aspecto

Este modelo soporta generación de imágenes en las siguientes dimensiones:

Dimensiones	Relación de Aspecto
1024 x 1024	1:1 Cuadrado
1152 x 896	9:7
896 x 1152	7:9
1216 x 832	19:13
832 x 1216	13:19
1344 x 768	7:4 Horizontal
768 x 1344	4:7 Vertical
1536 x 640	12:5 Horizontal
640 x 1536	5:12 Vertical

Agradecimientos

El desarrollo y lanzamiento de Animagine XL 3.1 no hubiera sido posible sin las contribuciones y apoyo invaluables de las siguientes personas y organizaciones:

• SeaArt.ai: Nuestro socio colaborador y patrocinador.

• Shadow Lilac: Por proporcionar el modelo de clasificación estética, aesthetic-shadow-v2.

• Derrian Distro: Por su scheduler personalizado de tasa de aprendizaje, adaptado de LoRA Easy Training Scripts.

• Kohya SS: Por sus completos scripts de entrenamiento.

• Colaboradores de Cagliostrolab: Por su dedicación en entrenamiento del modelo, gestión del proyecto y curación de datos.

• Probadores Tempranos: Por sus valiosos comentarios y esfuerzos en aseguramiento de calidad.

• NovelAI: Por su enfoque innovador en etiquetado estético, que inspiró nuestra implementación.

Gracias a todos por su apoyo y experiencia para impulsar los límites de la generación de imágenes estilo anime.

Limitaciones

Aunque Animagine XL 3.1 representa un avance significativo en la generación de imágenes estilo anime, es importante reconocer sus limitaciones:

1. Enfoque en Anime: Este modelo está diseñado específicamente para generar imágenes de estilo anime y no es apto para crear fotos realistas.

2. Complejidad del Prompt: Puede no ser adecuado para usuarios que esperan resultados de alta calidad con prompts cortos o simples. El entrenamiento se centró en la comprensión del concepto más que en el refinamiento estético, lo que puede requerir prompts más detallados y específicos para lograr el resultado deseado.

3. Formato del Prompt: Animagine XL 3.1 está optimizado para etiquetas estilo Danbooru más que para prompts en lenguaje natural. Para mejores resultados, se recomienda usar etiquetas y sintaxis adecuadas.

4. Anatomía y Renderizado de Manos: A pesar de las mejoras en anatomía y renderizado de manos, puede haber casos en los que el modelo produzca resultados subóptimos en estas áreas.

5. Tamaño del Conjunto de Datos: El conjunto de datos usado para entrenar Animagine XL 3.1 consta de aproximadamente 870,000 imágenes. Combinado con el conjunto de datos de la iteración previa (1.2 millones), el total es alrededor de 2.1 millones de imágenes. Aunque considerable, este tamaño puede ser todavía limitado para un modelo "definitivo" de anime.

6. Contenido NSFW: Animagine XL 3.1 ha sido diseñado para generar contenido NSFW más equilibrado. Sin embargo, es importante notar que el modelo aún puede producir resultados NSFW, incluso si no es explicitamente solicitado.

Reconociendo estas limitaciones, buscamos proporcionar transparencia y establecer expectativas realistas para los usuarios de Animagine XL 3.1. A pesar de estas restricciones, creemos que el modelo representa un avance significativo en la generación de imágenes estilo anime y ofrece una herramienta poderosa para artistas, diseñadores y entusiastas por igual.

Licencia

Basado en Animagine XL 3.0, Animagine XL 3.1 está bajo la licencia Fair AI Public License 1.0-SD, compatible con la licencia de modelos Stable Diffusion. Puntos clave:

1. Compartir Modificaciones: Si modificas Animagine XL 3.1, debes compartir tanto tus cambios como la licencia original.

2. Accesibilidad al Código Fuente: Si tu versión modificada es accesible en red, proporciona una manera (como un enlace de descarga) para que otros obtengan el código fuente. Esto aplica también a modelos derivados.

3. Términos de Distribución: Cualquier distribución debe ser bajo esta licencia o una con reglas similares.

4. Cumplimiento: El incumplimiento debe corregirse en 30 días para evitar la terminación de la licencia, enfatizando transparencia y adherencia a valores de código abierto.

La elección de esta licencia busca mantener Animagine XL 3.1 abierto y modificable, alineado con el espíritu de la comunidad open-source. Protege a contribuyentes y usuarios, fomentando una comunidad colaborativa, ética y open-source. Esto asegura que el modelo no solo se beneficie del aporte comunitario, sino que también respete las libertades del desarrollo open-source.

Finalmente, el servidor de Cagliostro Lab abierto al público https://discord.gg/cqh9tZgbGc

Siéntete libre de unirte a nuestro servidor de Discord.
Si quieres donar o invitarnos a un café puedes hacerlo Aquí

Muchas gracias ^_^