¿Qué es un LoRA en la IA de imagen y video?
LoRA explicado: el archivo pequeño que especializa un modelo de imagen o video en un estilo, un personaje o un movimiento de cámara, y cómo se usa en ComfyUI.
En esta página
Un LoRA (Low-Rank Adaptation) es un archivo pequeño que especializa un modelo de IA grande en algo concreto, como un estilo, un personaje o un tipo de movimiento, sin reentrenar el modelo completo. Se carga encima del modelo base como un filtro de conocimiento: el modelo sigue siendo el mismo, pero «sabe» dibujar tu personaje o mover la cámara como le enseñaste.
Cómo funciona, sin matemáticas#
En lugar de modificar los miles de millones de parámetros del modelo, el LoRA entrena un pequeño conjunto de ajustes que se suman a los originales. Por eso pesa megas y no gigas, se entrena con pocas imágenes o clips y se puede combinar con otros LoRA. En términos del espacio latente, empuja al modelo hacia una zona concreta.
Tipos de LoRA útiles para video#
| Tipo | Ejemplo real | Para qué sirve |
|---|---|---|
| De movimiento | MotionLoRA de AnimateDiff v2: 8 movimientos de cámara, unos 74 MB cada uno | pedir paneos o zooms consistentes |
| De velocidad | Lightx2v para Wan 2.2, 4 pasos | generar más rápido en GPU modestas |
| De estilo | LoRA de anime o acuarela sobre Stable Diffusion | estética coherente en toda una serie |
| De personaje | entrenado con imágenes de tu diseño | consistencia de personaje |
Los datos de MotionLoRA vienen del repositorio de AnimateDiff y los de Lightx2v, de la documentación de ComfyUI para Wan 2.2.
Que es LORA en Stable Diffusion
Explicación en español de qué es un LoRA y cómo se carga en Stable Diffusion.
Dónde se usan#
Los LoRA viven en el ecosistema abierto: ComfyUI, AnimateDiff y Wan. Las plataformas comerciales no aceptan archivos LoRA, pero ofrecen sus propias formas de fijar un personaje con imágenes de referencia.
Límites y cuidado#
- Compatibilidad: un LoRA solo sirve para el modelo base con el que se entrenó. Un LoRA de SD1.5 no funciona en Wan.
- Sobreajuste: con pesos altos, el LoRA «se come» el prompt y todo sale igual.
- Derechos: entrenar un LoRA con la cara de una persona real sin su permiso abre la puerta a deepfakes; con obras de otros artistas, a conflictos de derechos de autor.
Desde el oficio, un LoRA de personaje es la hoja de modelo de la era generativa: fija proporciones y rasgos para que todo el equipo, humano o máquina, dibuje lo mismo. La comparativa de IA de video de código abierto muestra qué modelos admiten este flujo.