Temario Lección 174 de 246 · Módulo 15: Comprimir, reconstruir, generar (autocodificadores y VAE)
Módulo 15: Comprimir, reconstruir, generar (autocodificadores y VAE)

Pasear de un dígito a otro

Por qué importa Si el espacio de códigos no tiene huecos, la línea recta entre dos códigos debería pasar por imágenes que sean dígitos todo el camino. Es una prueba directa de lo que compró el tirón 2, y la base de cada "transformación" que has visto en los generadores de imágenes.

Toma dos dígitos de prueba, a y b. Sus códigos son mu_a y mu_b. Un paseo por el latente decodifica los puntos mu_a + t (mu_b - mu_a) para t de 0 a 1. Compáralo con la alternativa obvia, un fundido en píxeles: (1 - t) a + t b, que solo mezcla dos tintas.

Mira la escena: el mismo paseo dibujado de las dos maneras, fotograma a fotograma, con la cercanía de cada fotograma al dígito real más cercano al lado.

Luego mídelo con muchas parejas, no con una: toma 200 parejas de dígitos distintos y juzga los puntos a mitad de camino (t = 0.5) de cada método.

Palabras y símbolos de esta lección
código (latente)
los pocos números que el codificador saca de una imagen
VAE
autocodificador variacional: un autocodificador cuyos códigos se empujan para llenar N(0, 1), así que los códigos aleatorios se decodifican en imágenes nuevas
mu, logvar
el centro y el log de la dispersión al cuadrado de un número del código en un VAE
cercanía, variedad
el juez del curso: la distancia al dígito real más cercano, y los bits de reparto entre los diez dígitos
paseo por el latente
decodificar puntos de la línea recta entre dos códigos
Tu turno

Escribe walk(model, a, b, steps) que devuelva steps imágenes de a a b a través del espacio de códigos (la primera y la última son los códigos decodificados de a y b). Luego rellena halfway con la cercanía de las 200 imágenes a mitad de camino para el paseo del VAE y para el fundido.

¿Has visto un problema en esta lección? Avísanos · Preguntar sobre esta lección

Este ejercicio se abre pronto

Termina la lección anterior y esta se desbloquea. Todo el curso es gratis, no hace falta cuenta, y puedes leer esta lección ahora mismo.