Cómo ejecutar el modelo FLUX AI gratis (NSFW)

En agosto de 2024, un equipo de ex-desarrolladores de Stability AI anunció la formación de Black Forest Labs, y el lanzamiento de su primer modelo de IA, FLUX.1, entrenado con 12 mil millones de parámetros y basado en una nueva arquitectura de transformador.

La recepción del modelo fue abrumadoramente positiva. Los usuarios quedaron sorprendidos por la calidad de imagen y el reconocimiento de prompt.

Lo que hace que el modelo Flux.1 sea aún más especial es que es un modelo de código abierto, por lo que la comunidad podrá construir sobre él entrenando modelos personalizados y LORAs con diferentes capacidades.

Flux.1 consiste en tres variaciones de modelo;

• Flux.1 [Pro] – Pro está disponible únicamente para uso a través de API. Puedes usar la API de Black Forest Labs, o un número de sus socios comerciales, para generar imágenes con Flux.1 Pro. Los pesos (archivo del modelo) no pueden ser descargados, y aunque pudieran, los requisitos del sistema serían demasiado altos para ser usados con hardware de consumo.

• Flux.1 [Dev] – Dev es un modelo de código abierto para aplicaciones no comerciales. Destilado de Flux.1 [Pro], proporciona una calidad de imagen y capacidades de reconocimiento de prompt similares mientras es más eficiente; podemos ejecutarlo localmente en hardware de consumo. Flux.1 [Dev] se lanza bajo una Licencia No Comercial. Descarga desde Hugging Face aquí.

• Flux.1 [Schnell] – Schnell es el modelo súper rápido. Te permite hacer generaciones rápidas con bajo conteo de pasos a expensas de algo de calidad de imagen. Flux.1 [Schnell] se lanza bajo la Licencia Apache-2.0. Descarga desde Hugging Face aquí.

¿Qué tan bueno es FLUX.1? ¿Qué calidad puedo esperar?

Descrito por muchos entusiastas de la IA como “el modelo que hemos estado esperando” (especialmente después de la decepción de SD3), Flux ha sido recibido y abrazado con los brazos abiertos. La fidelidad de la imagen, la adherencia al prompt y la calidad general de la imagen son excepcionales, estableciendo un nuevo estándar en el paisaje de text2img.

Solo echa un vistazo a estos ejemplos:

Y no olvidemos las capacidades NSFW (más prompts NSFW aquí):

¿Cómo puedo probar Flux en línea?

Puedes usar FLUX.1 de forma gratuita (uso limitado) en Hugging Face. Aquí están los generadores para los modelos Dev y Schnell.

También puedes ejecutar FLUX.1 en Replicate.com: Dev y Schnell (también uso gratuito limitado).

¿Cómo uso Flux localmente?

Actualmente, hay un par de opciones para generación local, dependiendo de tu hardware.

En el momento de escribir esto, no hay soporte para Automatic1111.

Veamos nuestras opciones:

• SwarmUI (mi recomendación personal)
• Forge
• ComfyUI

Uso de SwarmUI

Aquí está el enlace de descarga:

https://github.com/mcmonkeyprojects/SwarmUI

Sigue las instrucciones, que se repiten aquí:

Nota: si estás en Windows 10, es posible que necesites instalar manualmente git y DotNET 8 primero. (En Windows 11 esto es automático).

• Descarga el archivo Install-Windows.bat, guárdalo en algún lugar donde quieras instalarlo (no en Program Files), y ejecútalo. Para mí, eso es en mi unidad D:, pero depende de ti.
  • Debería abrirse un símbolo del sistema e instalarse.
  • Si se cierra sin avanzar, intenta ejecutarlo de nuevo, a veces necesita ejecutarse dos veces.
  • Colocará un ícono en tu escritorio que puedes usar para relanzar el servidor en cualquier momento.
  • Cuando el instalador termine, lanzará automáticamente el servidor StableSwarmUI y abrirá una ventana del navegador a la página de instalación.
  • Sigue las instrucciones de instalación en la página.
  • Después de enviar, ten paciencia, algunos de los procesos de instalación tardan unos minutos (descargando modelos, etc.).

Eso debería terminar la instalación, ofreciendo el modelo base SD XL.

Para iniciarlo, haz doble clic en el archivo “Launch-Windows.bat”. También habrá colocado un acceso directo en tu escritorio, a menos que le hayas dicho que no lo hiciera.

Intenta crear una imagen con el modelo XL. Si eso funciona, ¡genial!

Descarga el modelo Flux desde aquí:

• El modelo Dev, si tienes 12GB+ de VRAM:
  https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main

• El modelo Schnell, si tienes menos:
  https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main

También descarga el archivo “ae.safetensors” correspondiente para el modelo que elijas.

Pon tu archivo FLUX elegido en tu carpeta unet:

SwarmUI\Models\unet

Luego coloca el archivo “ae.safetensors” en tu carpeta VAE:

SwarmUI\Models\VAE

Cierra la aplicación, tanto el navegador como la consola.

Reinicia Swarm con el archivo Windows-launch.bat.

Deberías poder seleccionar Flux como el modelo, intenta crear una imagen.

Te dirá que está en la cola.

Tendrás que esperar, porque Swarm está descargando archivos grandes. Puedes verificar el progreso en la consola.

Cuando la descarga esté completa, ¡tu primera imagen debería empezar a aparecer!

ComfyUI

Flux.1 se lanzó con soporte de día 1 para ComfyUI, lo que lo convierte en una de las formas más rápidas y fáciles de comenzar a generar con los modelos originales de Black Forest Labs. Para comenzar a usar Flux con ComfyUI, necesitarás los siguientes componentes:

Modelos Flux.1	Enlace HF	Enlace Civitai
ae.safetensors (vae, requerido)	Repositorio HF de Black Forest Labs
flux1-dev.safetensors	Repositorio HF de Black Forest Labs	Enlace de descarga Civitai
flux1-schnell.safetensors	Black Forest Labs Repositorio HF	Enlace de descarga Civitai
Clip_l.safetensors	Repositorio HF de Comfyanonymous
t5xxl_fp16.safetensors	Repositorio HF de Comfyanonymous
t5xxl_fp8_e4m3fn.safetensors	Repositorio HF de Comfyanonymous

• Ten en cuenta que los modelos Flux-dev y -schnell .safetensors deben colocarse en la carpeta ComfyUI\models\unet.

• Los modelos Clip deben colocarse en la carpeta ComfyUI\models\clip. Es posible que ya tengas los modelos Clip requeridos si has utilizado anteriormente SD3.

• Algunas consideraciones sobre los requisitos del sistema;
  • flux1-dev requiere más de 12GB de VRAM
  • flux1-schnell puede ejecutarse con 12GB de VRAM
  • Si tienes menos de 32GB de RAM del sistema, usa el codificador de texto t5xxl_fp8_e4m3fn en lugar de la versión t5xxl_fp16.

⚠️ Si no puedes ejecutar los modelos oficiales ‘completos’, el creador Kijai ha lanzado versiones comprimidas fp8 de ambos flux1-dev y flux1-schnell. Aunque puede haber alguna reducción en la calidad de la imagen, estas versiones permiten que los usuarios con menos VRAM disponible generen con Flux.

Modelos Flux.1	Enlace HF
flux1-dev-fp8.safetensors	Repositorio HF de Kijai
flux1-schnell-fp8.safetensors	Repositorio HF de Kijai

También necesitarás un flujo de trabajo básico de texto a imagen para comenzar. El enlace de descarga a continuación proporciona una configuración sencilla con algunas opciones preestablecidas sólidas. Además, hemos incluido un cargador de LoRA (bypassed por defecto), ¡ya que ya estamos viendo las primeras LoRAs de Flux apareciendo en Civitai!

civitai_flux_t2i_workflowDescargar

Forge

Una de nuestras interfaces favoritas, Forge, ha recibido soporte para Flux en una sorprendente actualización mayor. Si estás familiarizado con la interfaz de Automatic1111, te sentirás como en casa con Forge; las interfaces de Gradio son prácticamente idénticas.

Forge puede soportar los modelos originales de Flux y los codificadores de texto, como se listó anteriormente para Comfy.

Para usar los modelos completos y los codificadores de texto, hay nuevos campos en los que se pueden cargar los modelos y codificadores;

El creador de Forge, Illyasviel, ha lanzado un modelo NF4 “comprimido” que actualmente es la forma recomendada de usar Flux con Forge; “NF4 es significativamente más rápido que FP8 en dispositivos de 6GB/8GB/12GB y ligeramente más rápido para dispositivos de >16GB de VRAM. Para GPUs con 6GB/8GB de VRAM, la aceleración es de aproximadamente 1.3x a 2.5x (pytorch 2.4, cuda 12.4) o aproximadamente 1.3x a 4x (pytorch 2.1, cuda 12.1)“

Modelo	Enlace HF
flux1-dev-bnb-nf4-v2.safetensors	Repositorio HF de Illyasviel
flux1-dev-fp8.safetensors	Repositorio HF de Illyasviel

¡Nota! Si tu GPU soporta CUDA más reciente que 11.7, puedes usar el modelo NF4. La mayoría de las GPUs RTX3XXX y 4XXX soportan NF4).

Si tu GPU es una GTX10XX/20XX, puede que no soporte NF4. En este caso, usa el modelo fp8.