Programma Les 174 van 246 · Module 15: Samendrukken, herbouwen, genereren (autoencoders en VAEs)
Module 15: Samendrukken, herbouwen, genereren (autoencoders en VAEs)

Van de ene naar de andere cijfer lopen

Waarom dit ertoe doet Als de code ruimte geen gaten heeft, moet de rechte lijn tussen twee codes overal door afbeeldingen die cijfers zijn lopen. Dat is een directe test van wat pull 2 kocht, en de basis van elke "morph" die je hebt gezien van image generators.

Neem twee testcijfers, a en b. Hun codes zijn mu_a en mu_b. Een latent walk decodeert de punten mu_a + t (mu_b - mu_a) voor t van 0 tot 1. Vergelijk het met het voor de hand liggende alternatief, een cross-fade in pixels: (1 - t) a + t b, wat alleen twee inktsoorten mengt.

Bekijk de scène: dezelfde wandeling beide kanten op getekend, frame voor frame, met de nabijheid van elk frame tot het dichtstbijzijnde echte cijfer ernaast.

Meet het dan over veel paren, niet over één: neem 200 paren van verschillende cijfers en beoordeel de halve punten (t = 0.5) van elke methode.

Woorden en symbolen in deze les
code (latent)
de weinige getallen die de encoder maakt van één afbeelding
VAE
variational autoencoder: een autoencoder waarvan de codes worden getrokken om N(0, 1) te vullen, zodat willekeurige codes decoderen naar nieuwe afbeeldingen
mu, logvar
het centrum en de log van de gekwadrateerde spreiding van een code nummer in een VAE
nabijheid, variëteit
de cursusrechter: afstand tot het dichtstbijzijnde echte cijfer, en bits van spreiding over de tien cijfers
latent walk
decodering van punten op de rechte lijn tussen twee codes
Jij bent aan de beurt

Schrijf walk(model, a, b, steps) die steps afbeeldingen van a tot b door de code space (de eerste en laatste zijn de ontcijferde codes van a en b). Vul daarna halfway met de nabijheid van de 200 halve afbeeldingen voor de VAE walk en voor de cross-fade.

Een probleem ontdekt in deze les? Meld het · Vraag naar deze les

Deze oefening opent binnenkort

Maak de les ervoor af voordat deze wordt ontgrendeld. De hele cursus is gratis, geen account nodig, en je kunt deze les nu lezen.