Glosario

¿Qué es un modelo de difusión?

Modelo de difusión explicado sin fórmulas: cómo convierte ruido en imagen o video paso a paso, por qué importan los pasos y qué modelos de video lo usan.

En esta página

Un modelo de difusión es un tipo de IA generativa que aprende a quitar ruido de una imagen y, al usarlo al revés, crea imágenes o video nuevos a partir de ruido puro. Durante el entrenamiento ve millones de ejemplos degradados con ruido creciente y aprende a reconstruirlos. Al generar, arranca de una «nieve» aleatoria y la limpia en varios pasos, guiado por tu prompt, hasta que aparece la escena.

Cómo genera un clip, paso a paso#

  1. Ruido inicial: el modelo parte de un bloque de ruido aleatorio. La semilla (seed) fija ese ruido; con la misma semilla y los mismos ajustes obtienes el mismo resultado.
  2. Guía del texto: un codificador traduce el prompt a números que orientan cada paso.
  3. Limpieza iterativa: en cada paso el modelo predice qué parte es ruido y la resta.
  4. Decodificación: el resultado, que vive en un espacio latente comprimido, se convierte en fotogramas visibles.

En video, el modelo limpia a la vez todos los fotogramas del clip, por eso puede mantener el movimiento coherente.

Qué modelos de video usan difusión#

ModeloVariante documentadaFuente
Kling 3.0Diffusion Transformer con VAE 3D propioWikipedia
Seedance 1.5 ProDiT de doble rama, audio y video juntospaper de ByteDance Seed
Wan 2.2 A14Bdos expertos: ruido alto y ruido bajodocs de ComfyUI

El caso de Wan 2.2 es didáctico: en ComfyUI el modelo de 14B se carga como dos archivos, uno que trabaja los primeros pasos (forma y composición) y otro los últimos (detalle). Es la difusión hecha visible. La ficha de Wan explica cómo montarlo.

Miniatura del video «Cómo funciona la generación de imágenes con IA (modelos de difusión)» Cómo funciona la generación de imágenes con IA (modelos de difusión)

Explicación en español del proceso de difusión aplicado a imágenes, base de los modelos de video.

Por qué te importa al crear#

Entender la difusión explica por qué cada generación sale distinta: cambia el ruido de partida. Por eso conviene fijar la semilla cuando encuentras un resultado que te gusta y quieres variar solo el prompt. También explica el costo: más pasos y más resolución implican más cálculo, y eso se traduce en créditos o en minutos de GPU.

Si quieres ver la difusión por dentro, ComfyUI expone cada nodo del proceso. Para usarla sin tocar parámetros, la guía para crear videos con IA compara las plataformas listas para usar. Más contexto teórico en la entrada de Wikipedia sobre modelos de difusión.

Preguntas frecuentes

¿Qué diferencia hay entre un modelo de difusión y un Diffusion Transformer?

El Diffusion Transformer (DiT) es un modelo de difusión cuya red principal es un transformer, la misma familia de arquitectura de los modelos de lenguaje. Sigue quitando ruido por pasos, pero escala mejor a video largo y de alta resolución. Kling documenta una arquitectura DiT con VAE 3D y ByteDance describe Seedance 1.5 Pro como un DiT de doble rama para audio y video.

¿Por qué algunos flujos de ComfyUI usan 4 pasos y otros 30?

Porque hay versiones aceleradas. Un modelo de difusión estándar necesita muchos pasos de limpieza; los modelos destilados o ciertos LoRA de aceleración, como Lightx2v de 4 pasos para Wan 2.2, reducen el número de pasos a cambio de algo de control o variedad. Para pruebas rápidas convienen pocos pasos; para el render final, los valores recomendados por la plantilla.

Sigue leyendo

Ver todo en Glosario →

Guías más consultadas: Krea AI Vidnoz AI Gemini Omni