Twee treks op elke kode (Sien dit)
Waarom dit saak maak Die oplossing is om die kodes die spasie in 'n bekende vorm te laat vul, sodat willekeurige punte van daardie vorm op die plek land waar die decoder geleer het om te teken. 'n variational autoencoder (VAE) doen dit met twee treggies op elke kode.
Kyk eers na die toneel. Elke karakter is een toetsdigit, geteken waar sy 2 kodenoemers dit plaas, as die digit self; die 7s is in kleur sodat jy een groep kan volg.
- Trek 1, bou goed oor: kodes van verskillende syfers moet apart bly, anders kan die decoder nie hulle onderskei nie.
- Trek 2, bly naby die middel: elke kode word na die middel getrek en 'n bietjie vaag gemaak ('n klein wolk, nie 'n punt nie), sodat die kodes die klokkurwe N(0, 1) rondom die middel sonder gapings vul.
Sampling beteken dan: trek 'n punt uit N(0, 1) en dekodeer dit. Omdat die kodes daardie gebied vul, land die punt iewers waar die decoder dit ken.
In die VAE gee die encoder twee dinge per kode-nommer: 'n sentrum mu en 'n spreiding, geskryf as logvar (die log van die gekwadrateerde spreiding, wat enige getal kan wees). Die kode is 'n trek uit N(mu, spread). gen.train_vae doen een opleiding; rebuild_weight en weight stel die krag van elke trek.
Voorspel eers: as jy pull 2 verwyder, wat gebeur met die kodes? As jy pull 1 verwyder?
Woorde en simbole in hierdie les
- autoencoder
- an encoder wat 'n prentjie in 'n paar nommers druk en 'n decoder wat dit weer opbou
- kode (latent)
- die paar nommers wat die encoder uit een prentjie maak
- VAE
- variational autoencoder: 'n autoencoder waarvan die kodes getrek word om N(0, 1) te vul, sodat willekeur kodes ontkodeer na nuwe prente
- mu, logvar
- die middelpunt en die logaritme van die gekwadraat van die spreiding van 'n kode-nommer in 'n VAE
Stel guess vir beide verwyderings op een van "spread out", "all at the centre" of "no change". Dwing dan drie 2-number VAEs aan (een of twee sekondes elk in die blavier) en vul spread met die gemiddelde afstand van die test codes vanaf die middel, en noise met die gemiddelde spreiding exp(logvar / 2), vir elk.
Sien jy 'n probleem in hierdie les? Rapporteer dit · Vra oor hierdie les
Hierdie oefening open binnekort
Voltooi die lesie voor dit en hierdie een sal ontvanklik wees. Die hele kursus is gratis, geen rekening nodig nie, en jy kan hierdie les nou lees.
Hierdie blutser blokkeer koekies vir learn.floati.life, so lesse wat jy hier voltooi het kan nie in volgorde oopgaan nie. Laat koekies vir hierdie webwerf toe en laai nuut.