Programme Leçon 241 sur 246 · Module 23 : Atelier final : une fiche de modèle exécutable
Module 23 : Atelier final : une fiche de modèle exécutable

Évaluation sur données mises de côté, avec barres d'erreur

Pourquoi c'est important Chaque choix que tu as fait a regardé le score de validation, donc il est maintenant un peu optimiste. Une seule évaluation sur des données que tu n'as jamais regardées, avec des barres d'erreur, c'est le nombre que tu peux annoncer.

Choisis tes réglages FINAL d'après ce que tes ablations ont montré, au plus 4 coûts de référence. Entraîne-le avec la graine 0. Puis note-le une seule fois sur le jeu de test caché : track.score(model, hidden=True, per_item=True) donne un nombre par élément de test, et studio.interval(items) la moyenne et un intervalle bootstrap à 95 %.

Le jeu caché est livré dans cette page, donc il est caché, pas scellé : tu pourrais le regarder. Le certificat du cours ne repose pas sur son secret ; ta fiche, si, donc regarde une seule fois, à la fin.

Seuils de réussite (le plan par défaut passe les deux) : language, moyenne d'au moins -2.72 ; images, au moins 0.42.

Mots et symboles de cette leçon
référence de base
l'exécution simple à laquelle chaque changement est comparé, sur les mêmes graines
ablation
un seul changement par rapport à la référence de base, exécuté sur plusieurs graines, pour voir ce qu'il fait
jeu de test caché
des données notées une seule fois, à la fin, après que chaque choix a été fait
À ton tour

Définis FINAL, entraîne final, et remplis validation (son score de validation), hidden (moyenne, bas, haut) et gap (validation moins moyenne cachée).

Tu as repéré un problème dans cette leçon ? Signale-le · Pose une question sur cette leçon

Cet exercice s'ouvre bientôt

Termine la leçon précédente pour débloquer celle-ci. Tout le cours est gratuit, aucun compte n'est requis, et tu peux lire cette leçon dès maintenant.