Uso de LoRA: superposición de estilos y aceleración a 4 pasos
ComfyUI LoRA te permite cambiar de estilo sin cambiar el modelo base, y además comprimir un muestreo de más de veinte pasos a 4 pasos. Esta página te guía para dominar tres usos en 10 minutos.
Objetivo
En una frase: integra LoRA en tu flujo de trabajo existente de texto a imagen — primero carga un solo LoRA para cambiar el estilo, luego superpone varios LoRA, y finalmente usa un LoRA de aceleración tipo Lightning para comprimir los pasos de muestreo a 4.
Preparación
- Ya has completado la primera generación de imágenes con el flujo de trabajo predeterminado.
- Descarga de Civitai o Hugging Face 1–2 LoRA en formato
.safetensors, y anota el modelo base con el que es compatible. - Si quieres practicar la aceleración: prepara también un LoRA de aceleración tipo Lightning correspondiente al modelo base; para vídeo (como Wan), busca un LoRA de aceleración lightx2v.
Hazlo conmigo
Paso 1: coloca los archivos y conecta el nodo Load LoRA
Coloca el archivo LoRA en la carpeta ComfyUI/models/loras/, vuelve a la interfaz y actualiza (o reinicia ComfyUI). Haz doble clic en el lienzo, busca y añade el nodo Load LoRA: conecta las salidas MODEL y CLIP del Load Checkpoint a sus entradas model y clip respectivamente, y luego conecta sus salidas MODEL y CLIP a donde estaban originalmente el KSampler y el CLIP Text Encode. Deja strength_model y strength_clip en el valor predeterminado 1.0 por ahora.
Resultado esperado: la cola se completa con normalidad y la imagen generada refleja el estilo del LoRA; baja la intensidad a 0.5 y vuelve a ejecutar; el estilo se atenúa notablemente, lo que indica que el LoRA está funcionando.
Paso 2: encadena varios LoRA para superponer estilos
Arrastra otro nodo Load LoRA, conecta las salidas MODEL y CLIP del primer nodo a las entradas del segundo para formar una cadena. Selecciona LoRA distintos en cada nodo y ajusta la intensidad de cada uno en torno a 0.7.
Resultado esperado: con el mismo conjunto de prompts, la imagen generada muestra a la vez las características de ambos LoRA; si el estilo de una rama es demasiado marcado, baja solo la intensidad de esa rama.
Paso 3: usa un LoRA de tipo Lightning para acelerar a 4 pasos
Cambia al LoRA de aceleración Lightning, reduce los steps del KSampler a 4, ajusta cfg al rango bajo de 1–2@@I18N_KEEP_000031@@, y elige el sampler y el scheduler según las instrucciones de ese LoRA (Lightning suele usar euler + sgm_uniform@@I18N_KEEP_000032@@). Los pasos deben corresponder a la versión del LoRA: la versión de 4 pasos usa steps=4. Con los modelos de vídeo es igual: la serie Wan puede usar el LoRA de aceleración lightx2v y ajustar CFG a 1@@I18N_KEEP_000033@@.
Resultado esperado: con el mismo prompt, el tiempo de generación se reduce drásticamente y la calidad de imagen se acerca a la del muestreo original de más de veinte pasos.
Verificación
- Un solo LoRA surte efecto: genera una imagen con cada intensidad 0 / 0.8 / 1.2; el estilo debería intensificarse imagen a imagen.
- La superposición es controlable: pon la intensidad de un LoRA de la cadena en 0 y el estilo correspondiente debería desaparecer de la imagen.
- La aceleración funciona: registra el tiempo y los pasos antes y después de la aceleración con el mismo prompt, y confirma que la generación a 4 pasos es utilizable y no está sobreexpuesta.
Errores comunes
- El LoRA no aparece en la lista desplegable: el archivo debe estar en
models/loras; una vez colocado, actualiza o reinicia ComfyUI. - El modelo base no coincide: el LoRA se entrena sobre un modelo base específico; con un modelo base equivocado el resultado es deficiente o incluso produce imágenes extrañas; revisa las indicaciones de compatibilidad al descargar.
- No se redujo el CFG con el LoRA de aceleración: mantener el CFG habitual de alrededor de 7 provocará sobreexposición y corrupción; los pasos también deben corresponder a la versión de 4 pasos/8 pasos.
- Varios LoRA al máximo: con ambas intensidades en 1.0 es fácil que entren en conflicto; empieza con cada una en 0.7 y luego ajusta con precisión.
Próxima lección
Una vez que puedes superponer estilos libremente, el siguiente paso es aprender ControlNet para controlar la composición directamente con bocetos, profundidad y poses: Introducción a ControlNet: composición con boceto, profundidad y pose.
Recomendaciones para practicar: Qwen-Image texto a imagen, Qwen-Image-Edit edición por instrucciones, Wan2.2 14B texto a vídeo (para acelerar vídeo puedes combinarlo con lightx2v).