Lehrplan Lektion 173 von 246 · Modul 15: Zusammendrücken, Neuaufbau, Generieren (Autoencoder und VAEs)
Modul 15: Zusammendrücken, Neuaufbau, Generieren (Autoencoder und VAEs)

Dein VAE erstellt neue Ziffern

Warum das wichtig istJedes Teil ist bereit: das mu und logvar des encoders, der Trick zum Sampling, der rebuild loss und der KL. Packe sie in einen Trainingsschritt und du hast ein Modell, das Ziffern erzeugt, die niemand gezeichnet hat.

Ein Schritt des Trainings, in Worten:

  1. Eine Charge kodieren: mu, logvar = model.encode(E.T(x)).
  2. Zeichne eps aus N(0, 1) mit der Form von mu und schreibe den Code mit deiner Reparameterisierung.
  3. Dekodiere den Code zu Pixel-Scores: model.decode_logits(code).
  4. Loss = E.bce_with_logits(scores, x) + E.kl_to_standard(mu, logvar) (die Version der Haus-Engine für dein KL).
  5. Rückwärts, dann opt.step().

Beurteile es dann mit demselben Richter wie zuvor: Nähe und Vielfalt von 500 neuen Ziffern aus N(0, 1). Der Rebuild-Fehler wird schlechter sein als der des autoencoder (etwa 0.03 gegenüber 0.008). Das ist der Preis für pull 2, und es kauft einen Code-Raum, aus dem du sampeln kannst.

Wörter und Symbole in dieser Lektion
autoencoder
ein Encoder, der ein Bild in wenige Zahlen presst, und ein Decoder, der es wieder aufbaut
code (latent)
die wenigen Zahlen, die der encoder aus einem Bild macht
VAE
variational autoencoder: ein autoencoder, dessen codes so gezogen werden, dass sie N(0, 1) füllen, sodass zufällige codes zu neuen Bildern dekodiert werden
mu, logvar
das Zentrum und der Logarithmus der quadrierten Streuung einer Codenummer in einem VAE
reparameterisation
code = mu + exp(logvar / 2) x eps, wobei eps zuerst gezogen wird, damit die Gradienten mu und logvar
erreichen.
closeness, variety
der Kursrichter: Abstand zur nächsten echten Ziffer und Bits der Streuung über die zehn Ziffern
Du bist dran

Schreibe den Körper der Trainingsschleife (600 steps von 256 Bildern). Bestehung mit: test rebuild error unter 0.035, neuen Ziffern mit closeness maximal 1.30 und variety mindestens 3.0, und mindestens 3 aktiven Codenummern. Nutze deine eigene loop: gen.train_vae ist hier verboten.

Ein Problem in dieser Lektion entdeckt? Melde es · Frage zu dieser Lektion

Diese Übung öffnet bald

Beende die vorherige Lektion, damit diese freigeschaltet wird. Der ganze Kurs ist kostenlos, kein Konto erforderlich, und du kannst diese Lektion jetzt direkt lesen.