Programma Lezione 174 di 246 · Modulo 15: Schiaccia, ricostruisci, genera (autoencoder e VAE)
Modulo 15: Schiaccia, ricostruisci, genera (autoencoder e VAE)

Camminare da una cifra a un'altra

Perché è importante Se lo spazio dei codici non ha buchi, la retta tra due codici deve attraversare immagini che sono cifre per tutto il percorso. È un test diretto di che cosa ha comprato la trazione 2, e la base di ogni "morph" che hai visto dai generatori di immagini.

Prendi due cifre di test, a e b. I loro codici sono mu_a e mu_b. Una camminata latente decodifica i punti mu_a + t (mu_b - mu_a) per t da 0 a 1. Confrontala con l'alternativa ovvia, una dissolvenza nei pixel: (1 - t) a + t b, che mescola soltanto due inchiostri.

Guarda la scena: la stessa camminata disegnata in entrambi i modi, fotogramma per fotogramma, con la vicinanza di ogni fotogramma alla cifra vera più vicina accanto.

Poi misurala su molte coppie, non una: prendi 200 coppie di cifre diverse e giudica i punti a metà strada (t = 0.5) di ogni metodo.

Parole e simboli di questa lezione
codice (latente)
i pochi numeri che l'encoder crea da un'immagine
VAE
autoencoder variazionale: un autoencoder i cui codici vengono tirati a riempire N(0, 1), così i codici casuali si decodificano in immagini nuove
mu, logvar
il centro e il log del quadrato della dispersione di un numero del codice in un VAE
vicinanza, varietà
il giudice del corso: distanza dalla cifra vera più vicina, e bit di distribuzione sulle dieci cifre
camminata latente
decodificare i punti sulla retta tra due codici
Tocca a te

Scrivi walk(model, a, b, steps) che restituisce steps immagini da a a b attraverso lo spazio dei codici (la prima e l'ultima sono i codici decodificati di a e b). Poi riempi halfway con la vicinanza delle 200 immagini a metà strada per la camminata del VAE e per la dissolvenza.

Hai notato un problema in questa lezione? Segnalalo · Chiedi qualcosa su questa lezione

Questo esercizio si apre presto

Finisci la lezione precedente e questa si sblocca. L'intero corso è gratuito, senza account, e puoi leggere questa lezione subito.