Scrivi la model card
Perché è importante Una model card (Mitchell et al. 2019) è il modo in cui si consegna un modello a qualcun altro: che cos'è, come è stato addestrato, quanto funziona bene, e dove non è stato testato. Quasi tutte le card vengono scritte a memoria. La tua viene controllata rispetto al tuo registro delle esecuzioni.
Questa lezione riesegue le tue esecuzioni di baseline e finale (seed 0) in un registro nuovo, valuta il modello finale sull'insieme nascosto, e ti dà i numeri. Scrivi la card come un dizionario con questi campi:
track,final settings(il dict FINAL),weights(la dimensione del modello finale),training FLOPs(il suo costo)baseline validation score,validation score,hidden score,hidden interval[minimo, massimo]finding(una frase con i tuoi due numeri della sonda),ablations(una frase per cambiamento con il suo verdetto),limitations(su che cosa non è stato testato: almeno una frase completa)
Il controllo confronta ogni numero con il registro e con la valutazione nascosta, fino a 4 decimali. Poi rispondi onestamente alla lista di autocontrollo: True o False per ogni riga.
Parole e simboli di questa lezione
- baseline
- l'esecuzione semplice rispetto a cui si misura ogni cambiamento, sugli stessi seed
- ablazione
- un solo cambiamento rispetto alla baseline, eseguito su diversi seed, per vedere che cosa fa
- model card
- una breve scheda di che cos'è un modello, come è stato addestrato, quanto funziona bene e dove non è stato testato
Riempi card e checklist.
Hai notato un problema in questa lezione? Segnalalo · Chiedi qualcosa su questa lezione
Questo esercizio si apre presto
Finisci la lezione precedente e questa si sblocca. L'intero corso è gratuito, senza account, e puoi leggere questa lezione subito.
Questo browser blocca i cookie per learn.floati.life, quindi le lezioni che hai finito qui non si possono aprire in ordine. Consenti i cookie per questo sito e ricarica.