Interfaz de usuario cómoda

ComfyUI es un programa de código abierto basado en nodos que permite a los usuarios generar imágenes a partir de una serie de textos . Utiliza modelos de difusión gratuitos , como la Difusión Estable , como modelo base para sus capacidades de imagen, combinados con otras herramientas como ControlNet y la adaptación de rango bajo LCM , estando cada herramienta representada por un nodo en el programa.

ComfyUI se lanzó en GitHub en enero de 2023. Según comfyanonymous, el creador, un objetivo principal del proyecto era mejorar los diseños de software existentes en términos de la interfaz de usuario . ^{[ 3 ]} El creador había estado involucrado con Stability AI pero para el 3 de junio de 2024 esa participación había terminado y se había creado una organización llamada Comfy Org junto con los desarrolladores principales. ^{[ 4 ]} En julio de 2024, Nvidia anunció soporte para ComfyUI dentro de su software de modificación RTX Remix . ^{[ 5 ]} En agosto de 2024, se agregó soporte para el modelo de difusión Flux desarrollado por Black Forest Labs, y Comfy Org se unió a la Open Model Initiative creada por la Linux Foundation . ^{[ 6 ] [ 7 ]} A julio de 2026, el proyecto tiene 122k estrellas en GitHub. ^{[ 8 ]} ComfyUI es una de las interfaces de usuario más populares para Stable Diffusion, junto con Automatic1111 . ^{[ 9 ]}

La característica principal de ComfyUI es que está basado en nodos. ^{[ 10 ] [ 11 ]} Cada nodo tiene una función como "Cargador de modelo" o "Codificación de texto CLIP". ^{[ 12 ]} Los nodos están conectados para formar un grafo de flujo de control llamado flujo de trabajo. ^{[ 13 ]} Cuando se pone en cola una solicitud, aparece un marco resaltado alrededor del nodo que se está ejecutando actualmente, comenzando desde "punto de control de carga" y terminando con la imagen final y su ubicación de guardado. ^{[ 12 ]} Los flujos de trabajo suelen constar de decenas de nodos, formando un grafo acíclico dirigido complejo . ^{[ 13 ]} Los tipos de nodos incluyen carga de un modelo, especificación de solicitudes, muestreadores, planificadores, decodificadores VAE , modelos de restauración y escalado facial, LoRA , incrustaciones y ControlNets. ^{[ 14 ] [ 15 ]}

Se admiten varios muestreadores, como Euler , Euler_a, dpmpp_2m_sde y dpmpp_3m_sde. ^{[ 15 ]} Los flujos de trabajo se pueden guardar en un archivo, lo que permite a los usuarios reutilizar los flujos de trabajo de los nodos y compartirlos con otros usuarios. ^{[ 14 ] [ 16 ] [ 17 ]} El formato de archivo para los flujos de trabajo es JSON y se puede incrustar en las imágenes generadas. ^{[ 18 ]} Los usuarios también han creado extensiones personalizadas para el sistema base que se exponen como nuevos nodos, ^{[ 14 ] [ 19 ]} como la extensión para AnimateDiff, que tiene como objetivo crear vídeos. ^{[ 20 ] [ 21 ]} ComfyUI se ha descrito como más complejo en comparación con otras interfaces de usuario de difusión como Automatic1111. ^{[ 22 ] [ 23 ]} También se incluye un grupo de nodos predeterminado con el programa. ^{[ 12 ]}

A diciembre de 2024, se admitían 1674 nodos. ^{[ 24 ]} ComfyUI admite múltiples modelos de texto a imagen, incluidos Stable Diffusion, Flux y Hunyuan-DiT de Tencent , así como modelos personalizados de Civitai como Pony . ^{[ 24 ]}

En junio de 2024, un grupo de hackers llamado "Nullbulge" comprometió una extensión de ComfyUI para agregarle código malicioso. ^{[ 25 ]} La extensión comprometida, llamada ComfyUI_LLMVISION, se usaba para integrar la interfaz con los modelos de lenguaje de IA GPT-4 y Claude 3 , y estaba alojada en GitHub . Nullbulge publicó en su sitio web una lista con los datos de inicio de sesión de cientos de usuarios de ComfyUI en múltiples servicios, mientras que los usuarios de la extensión informaron haber recibido numerosas notificaciones de inicio de sesión. vpnMentor realizó una investigación de seguridad sobre la extensión y afirmó que podía "robar billeteras de criptomonedas , tomar capturas de pantalla de la pantalla del usuario, exponer información del dispositivo y direcciones IP , y robar archivos que contuvieran ciertas palabras clave o extensiones".

El sitio web de Nullbulge afirma que se dirigieron a usuarios que cometieron "uno de nuestros pecados", que incluía la generación de arte mediante IA, el robo de arte, la promoción de criptomonedas y cualquier otro tipo de robo a artistas, como el de Patreon . Afirmaron ser "un colectivo de individuos que creen en la importancia de proteger los derechos de los artistas y garantizar una compensación justa por su trabajo" y que creían que "el arte generado por IA es perjudicial para la industria creativa y debería desalentarse". ^{[ 25 ]}