Flujo de trabajo de ComfyUI
Usar lora en ComfyUI resulta sencillo cuando separas la carga del modelo de la aplicación de LoRA. Esta guía muestra dónde colocar cada nodo, cómo establecer los pesos y cómo verificar el resultado antes de cambiar el prompt.
Elige tu ruta
Empieza con la situación que coincida con tu gráfico. La ruta adecuada depende de si estás creando un flujo de trabajo nuevo o añadiendo Lora AI a un checkpoint que ya funciona.
Elige tu punto de partida
Elige la tarjeta que describa tu gráfico actual y aplica las indicaciones vinculadas sin reconstruir más de lo necesario.
Tienes un archivo de checkpoint, pero aún no tienes un gráfico funcional. Empieza con un flujo de trabajo básico de texto a imagen y coloca Lora AI entre la carga del checkpoint y el muestreo.
Obtendrás una base limpia que facilita determinar si el cambio se debe al LoRA o al resto del gráfico.
cómo usar lora ai en RedditTu prompt y tu checkpoint ya funcionan en otra interfaz y quieres la disposición equivalente de nodos en ComfyUI.
Puedes comparar el mismo modelo, prompt y peso aproximado en lugar de solucionar varias variables a la vez.
cómo usar lora en Stable DiffusionEstás experimentando con un adaptador entrenado para un personaje, producto o estilo visual y necesitas un patrón de carga reproducible.
Puedes mantener estable el checkpoint base mientras pruebas un archivo de Lora AI a la vez y registras su peso.
guía de entrenamiento de lora aiUn gráfico de ComfyUI ya produce imágenes, pero la LoRA añadida parece no hacer nada o cambia la imagen de forma demasiado drástica.
Puedes comprobar la compatibilidad de los archivos, las conexiones de los nodos y las intensidades del modelo y de CLIP en un orden controlado.
modelos de lora aiConstruye el gráfico
Esta es la secuencia fiable de tres partes para añadir una LoRA a un flujo de trabajo de texto a imagen de ComfyUI que ya funciona.
Usa CheckpointLoaderSimple para cargar el modelo base. Mantén visibles sus salidas MODEL y CLIP, porque ambas deben pasar por el nodo LoRA antes de llegar al resto del gráfico.
Añade Load LoRA y conecta MODEL del checkpoint a su entrada model y CLIP del checkpoint a su entrada clip. Selecciona el archivo LoRA en el campo model_name del nodo.
Envía la salida MODEL del nodo LoRA a la entrada model del sampler y su salida CLIP a los nodos de codificación de texto. Mantén la ruta VAE del checkpoint, a menos que tu flujo de trabajo use específicamente otro VAE.
Comprobación de conexiones
Compara ambos lados antes de renderizar. El lado izquierdo es el gráfico base; el derecho es el mismo gráfico con un adaptador de Lora AI aplicado.
Solo checkpoint base
Checkpoint más LoRA
Solo checkpoint base
CheckpointLoaderSimple proporciona el MODEL base.
Checkpoint más LoRA
El mismo MODEL entra primero en Load LoRA.
Solo checkpoint base
CLIP del checkpoint pasa directamente a la codificación de texto.
Checkpoint más LoRA
CLIP del checkpoint pasa por Load LoRA antes de la codificación de texto.
Solo checkpoint base
No se ha seleccionado ningún archivo LoRA.
Checkpoint más LoRA
Se ha seleccionado un archivo LoRA compatible en model_name.
Solo checkpoint base
No se aplica ninguna intensidad del adaptador.
Checkpoint más LoRA
Establece strength_model deliberadamente y cambia una variable a la vez.
Solo checkpoint base
El condicionamiento de texto utiliza el CLIP del checkpoint sin cambios.
Checkpoint más LoRA
Establece strength_clip por separado cuando el adaptador lo admita o lo requiera.
Solo checkpoint base
El sampler recibe el MODEL original del checkpoint.
Checkpoint más LoRA
El sampler recibe el resultado MODEL de Load LoRA.
Solo checkpoint base
Útil para confirmar que el checkpoint y el prompt funcionan por sí solos.
Checkpoint más LoRA
Útil para comprobar si la LoRA cambia el sujeto o el estilo previstos.
Solo checkpoint base
No hay ninguna cadena de adaptadores que inspeccionar.
Checkpoint más LoRA
Encadena nodos Load LoRA solo después de que un adaptador funcione por sí solo.
Anatomía del nodo
Conoce los límites
El adaptador modifica un modelo base compatible; no es un modelo de imagen completo y no puede producir un resultado útil sin la familia de checkpoints adecuada.
Solución alternativaCarga primero un checkpoint compatible y, después, prueba el adaptador con un prompt base sencillo.
Si el flujo de trabajo base tiene un condicionamiento desconectado, una ruta de muestreo no válida o un VAE faltante, añadir un adaptador no reparará esos problemas.
Solución alternativaRenderiza el checkpoint sin LoRA, confirma que la configuración base funciona y solo después inserta Load LoRA.
Algunos archivos responden a una palabra de activación, otros responden a prompts descriptivos y otros dependen en gran medida de los captions de entrenamiento.
Solución alternativaLee las notas del modelo, prueba el activador recomendado y compara un prompt corto con un prompt descriptivo.
Un archivo creado para una arquitectura o familia de checkpoints diferente puede cargarse mal, tener poco efecto o producir resultados distorsionados.
Solución alternativaHaz coincidir el adaptador con la familia del modelo y conserva un checkpoint compatible conocido para realizar pruebas.
Comparación visual
La comparación útil no consiste simplemente en decidir qué es más bonito o peor. Comprueba si cambian el sujeto, la ropa, la pose, la textura o el estilo previstos, mientras la composición y el significado del prompt siguen siendo comprensibles.
Prueba el flujo de trabajo
Una vez conectado el gráfico de ComfyUI, usa un prompt enfocado y un único adaptador compatible para establecer una línea base. Después puedes llevar la misma idea a la generación de Lora AI, comparar los resultados y volver a ComfyUI con un objetivo más claro.
Prueba Lora AIPreguntas frecuentes
Carga tu checkpoint con CheckpointLoaderSimple, añade un nodo Load LoRA y conecta las salidas MODEL y CLIP del checkpoint a ese nodo. Después, conecta el MODEL adaptado al sampler y el CLIP adaptado a tus nodos de codificación de texto antes de seleccionar el archivo LoRA.
Colócalo después del cargador de checkpoint y antes del sampler y de los codificadores de texto. Tanto las rutas de MODEL como de CLIP deben pasar por Load LoRA, mientras que la conexión de VAE normalmente puede conservar su ruta existente.
Comprueba que el archivo esté almacenado en una ubicación que ComfyUI pueda detectar, que el checkpoint seleccionado pertenezca a la misma familia de modelos y que MODEL y CLIP estén conectados. Prueba también la palabra de activación recomendada y compárala con un renderizado generado sin el adaptador.
strength_model controla con qué intensidad el adaptador modifica el modelo de eliminación de ruido, mientras que strength_clip afecta al lado del acondicionamiento de texto. Son controles independientes, así que cambia uno cada vez y toma notas sobre qué configuración produjo la diferencia visible.
Sí, puedes encadenar nodos Load LoRA y pasar el MODEL y el CLIP adaptados de un nodo al siguiente. Empieza primero con un adaptador compatible, porque varios archivos hacen que los conflictos de pesos y la atribución sean mucho más difíciles de diagnosticar.