Programma Les 52 van 246 · Module 4: Je eigen autograd engine
Module 4: Je eigen autograd engine

Getallen vooruit, gradiënten achteruit

Waarom dit ertoe doet Voordat je de engine bouwt, zie precies wat hij moet doen, op vijf getallen.

Speel de animatie af en loop er langzaam doorheen. Let op twee dingen. Vooruitgaand heeft elke box alleen zijn inputs nodig. Achteruitgaand heeft elke box alleen de gradient nodig die van de box daarna komt, en zijn eigen lokale helling. Die lokaalheid maakt een engine mogelijk: elke operatie hoeft alleen zijn eigen kleine regel te kennen.

Samenvatting Gradient bij een box = gradient die van daarna komt, vermenigvuldigd met de lokale helling van de box. Waar een box twee andere voedt, tel je op wat van beide terugkomt.

Jij bent aan de beurt

Nieuwe getallen, dezelfde formule L = (a * b + c) ** 2, met a = 1, b = 4, c = -2. Bereken dit met de hand (geen code nodig buiten de getallen) en stel grad_a, grad_b en grad_c in.

Een probleem ontdekt in deze les? Meld het · Vraag naar deze les

Deze oefening opent binnenkort

Maak de les ervoor af voordat deze wordt ontgrendeld. De hele cursus is gratis, geen account nodig, en je kunt deze les nu lezen.