Programma Lezione 20 di 246 · Modulo 1: Python per questo corso
Modulo 1: Python per questo corso

Mini progetto: adattare una retta a piccoli spostamenti

Perché è importante È così che impara ogni rete neurale, tolte le parole difficili. Lo farai qui prima che abbia un nome.

Alcuni punti stanno più o meno su una retta y = slope * x + intercept, ma non conosciamo la pendenza né l'intercetta. Parti con entrambe a 0. Misura quanto sbaglia la retta: l'errore è la media di (previsione meno verità) al quadrato. Poi sposta di poco.

La ricetta degli spostamenti

  1. Prova la pendenza un po' più alta, e un po' più bassa. Tieni quella che abbassa l'errore, se una delle due lo fa.
  2. Fai lo stesso per l'intercetta.
  3. Ripeti. Se nessuno spostamento aiuta, rendi lo spostamento più piccolo, e fermati quando è minuscolo.

L'errore scende passo dopo passo finché la retta si posa sui punti. Nel Modulo 3 sostituirai "prova entrambe le direzioni" con una formula che ti dice subito da che parte si scende. Quella formula è il gradiente, e camminarci lungo si chiama discesa del gradiente. Ciò che costruisci qui, provare ogni impostazione su e giù a turno, ha un nome suo: ricerca per coordinate. È più lenta, ma è la stessa idea di camminare in discesa.

Errore quadratico medio: la media di ogni errore al quadrato. Elevare al quadrato rende positivo ogni errore e punisce di più quelli grandi.

Riepilogo Misura quanto sbagli, sposta di poco, tieni ciò che aiuta, ripeti.

Parole e simboli di questa lezione
media, dispersione
il valore medio, e più o meno quanto i valori se ne discostano (deviazione standard)
Tocca a te

Scrivi mse(slope, intercept, x, y) e fit_line(x, y). fit_line usa la ricetta degli spostamenti: parti da 0 e 0 con uno spostamento di 1.0, dimezza lo spostamento ogni volta che nessuno spostamento aiuta, fermati quando lo spostamento è sotto 0.0001, e restituisci (slope, intercept). Il test nascosto controlla che l'errore su dati nuovi sia vicino al migliore possibile.

Hai notato un problema in questa lezione? Segnalalo · Chiedi qualcosa su questa lezione

Questo esercizio si apre presto

Finisci la lezione precedente e questa si sblocca. L'intero corso è gratuito, senza account, e puoi leggere questa lezione subito.