Temario Lección 241 de 246 · Módulo 23: Estudio del proyecto final: una ficha del modelo que se puede ejecutar
Módulo 23: Estudio del proyecto final: una ficha del modelo que se puede ejecutar

Evaluación con datos reservados, con barras de error

Por qué importa Cada decisión que tomaste miró la puntuación de validación, así que ahora es un poco optimista. Una sola evaluación con datos que nunca miraste, con barras de error, es el número que puedes dar.

Elige tus ajustes FINAL a partir de lo que mostraron tus ablaciones, como mucho 4 costes de la referencia base. Entrénalo con la semilla 0. Luego puntúalo una sola vez con el conjunto de prueba oculto: track.score(model, hidden=True, per_item=True) da un número por elemento de prueba, y studio.interval(items) la media y un intervalo bootstrap del 95%.

El conjunto oculto viene dentro de esta página, así que está oculto, no sellado: podrías mirarlo. El certificado del curso no depende de que sea secreto; tu ficha sí, así que míralo una vez, al final.

Notas para aprobar (el plan por defecto supera las dos): lenguaje, media de al menos -2.72; imágenes, al menos 0.42.

Palabras y símbolos de esta lección
referencia base
la ejecución normal con la que se compara cada cambio, con las mismas semillas
ablación
un cambio a la referencia base, ejecutado con varias semillas, para ver qué hace
conjunto de prueba oculto
datos que se puntúan una sola vez, al final, después de tomar todas las decisiones
Tu turno

Pon FINAL, entrena final, y rellena validation (su puntuación de validación), hidden (media, mínimo, máximo) y gap (la validación menos la media oculta).

¿Has visto un problema en esta lección? Avísanos · Preguntar sobre esta lección

Este ejercicio se abre pronto

Termina la lección anterior y esta se desbloquea. Todo el curso es gratis, no hace falta cuenta, y puedes leer esta lección ahora mismo.