Kurrikulum Leson 103 van 250 · Neurale-Net Intuisie, LLMs & AI Graadstuk
Neurale-Net Intuisie, LLMs & AI Graadstuk

Kyk: Backprop & die Chain Rule

Gradient descent het een ding nodig: die gradiënt van die verlies met betrekking tot elke inset en gewig. Backpropagation is hoe jy dit kry, en dit is net die chain rule wat op 'n grafiek van operasies toegepas word.

Druk speel. Stuur 'n waarde vorentoe deur 'n klein grafiek (x -> double -> square -> L), en kyk dan hoe die gradiënt agtertoe vloei, en met elke stap se plaaslike gradiënt vermenigvuldig. Sodra jy dit sien, is die autograd engine wat jy volgende bou nie meer towerkuns nie.

Sien jy 'n probleem in hierdie les? Rapporteer dit · Vra oor hierdie les

Hierdie oefening open binnekort

Voltooi die lesie voor dit en hierdie een sal ontvanklik wees. Die hele kursus is gratis, geen rekening nodig nie, en jy kan hierdie les nou lees.