Temario Lección 191 de 246 · Módulo 17: Entra ruido, salen imágenes (difusión)
Módulo 17: Entra ruido, salen imágenes (difusión)

Enseñarle algo nuevo a un modelo entrenado (ajuste fino)

Por qué importa Nadie entrena un modelo de imagen grande desde cero para conseguir un estilo nuevo: hacen el ajuste fino de uno que ya sabe cómo funcionan las imágenes. Unos cientos de pasos con datos nuevos pueden bastar, porque la mayor parte de lo que sabe el modelo sigue sirviendo.

La tarea nueva: escritura en espejo. Cada dígito de entrenamiento está volteado de izquierda a derecha. El modelo de dígitos entrenado nunca ha visto ninguno.

difflab.train_digits(steps=..., model=model, data=(pictures, labels)) sigue entrenando un modelo existente con tus datos.

¿Cómo compruebas que aprendió la escritura en espejo y no otra cosa? Vuelve a voltear sus muestras: si se leen como los dígitos pedidos, dibuja dígitos en espejo. Y las muestras sin voltear deberían fallar ahora casi siempre al leerse, salvo los dígitos que se ven igual en un espejo (el 0, el 1 y el 8 casi lo hacen): si la mayoría se siguen leyendo bien, no ha cambiado mucho.

Palabras y símbolos de esta lección
eps
el ruido en forma de campana que se añadió; la red aprende a predecirlo
DDIM
muestrear saltando entre unos pocos pasos, sin ruido nuevo
ajuste fino
seguir entrenando un modelo ya entrenado con datos nuevos
Tu turno

Escribe mirror(pictures) (filas de 64 píxeles, volteadas de izquierda a derecha), haz el ajuste fino del modelo con dígitos de entrenamiento en espejo durante 400 pasos como mucho (unos segundos; 300 bastan), y rellena after con: la proporción de 500 muestras (w = 2, 20 pasos de DDIM) que se leen como el dígito pedido al volver a voltearlas, la proporción que se leen bien sin voltear, y la cercanía de las muestras vueltas a voltear.

¿Has visto un problema en esta lección? Avísanos · Preguntar sobre esta lección

Este ejercicio se abre pronto

Termina la lección anterior y esta se desbloquea. Todo el curso es gratis, no hace falta cuenta, y puedes leer esta lección ahora mismo.