Programma Lezione 242 di 246 · Modulo 23: Studio del progetto finale: una model card che puoi eseguire
Modulo 23: Studio del progetto finale: una model card che puoi eseguire

Scrivi la model card

Perché è importante Una model card (Mitchell et al. 2019) è il modo in cui si consegna un modello a qualcun altro: che cos'è, come è stato addestrato, quanto funziona bene, e dove non è stato testato. Quasi tutte le card vengono scritte a memoria. La tua viene controllata rispetto al tuo registro delle esecuzioni.

Questa lezione riesegue le tue esecuzioni di baseline e finale (seed 0) in un registro nuovo, valuta il modello finale sull'insieme nascosto, e ti dà i numeri. Scrivi la card come un dizionario con questi campi:

  • track, final settings (il dict FINAL), weights (la dimensione del modello finale), training FLOPs (il suo costo)
  • baseline validation score, validation score, hidden score, hidden interval [minimo, massimo]
  • finding (una frase con i tuoi due numeri della sonda), ablations (una frase per cambiamento con il suo verdetto), limitations (su che cosa non è stato testato: almeno una frase completa)

Il controllo confronta ogni numero con il registro e con la valutazione nascosta, fino a 4 decimali. Poi rispondi onestamente alla lista di autocontrollo: True o False per ogni riga.

Parole e simboli di questa lezione
baseline
l'esecuzione semplice rispetto a cui si misura ogni cambiamento, sugli stessi seed
ablazione
un solo cambiamento rispetto alla baseline, eseguito su diversi seed, per vedere che cosa fa
model card
una breve scheda di che cos'è un modello, come è stato addestrato, quanto funziona bene e dove non è stato testato
Tocca a te

Riempi card e checklist.

Hai notato un problema in questa lezione? Segnalalo · Chiedi qualcosa su questa lezione

Questo esercizio si apre presto

Finisci la lezione precedente e questa si sblocca. L'intero corso è gratuito, senza account, e puoi leggere questa lezione subito.