Programma Lezione 101 di 148 · Giudica il risultato
Giudica il risultato

Sei risposte a una domanda

Perché è importante Chiedere di nuovo e prendere la risposta più comune sembra una seconda opinione. I campioni di un modello condividono le sue abitudini, quindi la maggioranza può sbagliare insieme.

L'output dell'assistente in questa lezione è stato scritto per il corso esattamente nella forma che producono gli assistenti veri. Non è la registrazione di un modello in particolare.

Un collega ha chiesto sei volte "una funzione che restituisce la mediana di una lista di numeri". Quattro delle sei risposte prendono un solo elemento centrale dopo l'ordinamento, il che è sbagliato per le liste di lunghezza pari (la mediana di [1, 2, 3, 4] è 2.5); una di queste ordina anche sul posto la lista del chiamante. Due sono giuste. Vota su ciò che restituiscono, e una risposta sbagliata vince tre a due.

Eseguirle costa meno che discuterne. Pochi casi con risposte note, compreso quello che la risposta comune sbaglia, mettono in ordine le sei in un colpo solo.

load_sample esegue il codice di un campione qui, in questa scheda del browser, come il tuo. Questi campioni sono stati scritti per il corso. Con l'output di un assistente vero, leggilo prima ed eseguilo in un posto usa e getta, come un container o una macchina virtuale temporanea, mai accanto alle tue chiavi e ai tuoi dati.

Autoconsistenza: campionare diverse risposte e prendere la maggioranza. Aiuta quando gli errori sono casuali; non aiuta quando il modello ha un punto cieco sistematico.

Tocca a te

Scrivi rank(samples, name, cases). samples è una lista di stringhe di codice, ognuna pensata per definire una funzione chiamata name. cases è una lista di coppie (args, expected), dove args è una tupla. Per ogni campione, ottieni la sua funzione con load_sample(code, name) da creative.samples; se dà None (il codice non è riuscito a girare o non definisce name), ogni caso fallisce. Altrimenti chiama la funzione per ogni caso (passa una copia di ogni argomento lista, così un campione non può cambiare il caso per il successivo); un caso passa quando la chiamata restituisce un valore uguale a expected, e fallisce se è diverso o se solleva un'eccezione. Restituisci un dict per campione, {"sample": i, "passed": n, "failed": [case indexes]}, prima quelli con più casi superati, a parità per indice del campione.

Hai notato un problema in questa lezione? Segnalalo · Chiedi qualcosa su questa lezione

Questo esercizio si apre presto

Finisci la lezione precedente e questa si sblocca. L'intero corso è gratuito, senza account, e puoi leggere questa lezione subito.