Kurrikulum Leson 93 van 246 · Module 7: Werk aan nuwe data
Module 7: Werk aan nuwe data

Poort: sluit die gaping sonder om onderaan te pas (AI af)

Waarom dit saak maak Om 'n trein/valideringsgap te sluit is maklik as jy toegelaat word om die model nutteloos te maak. Om dit te doen terwyl jy die model goed hou, is die regte vaardigheid. Ken jy hierdie module reeds? Jy kan hierdie hek eerste aanpak, voor die ander lesse: om dit te slaag merk hierdie module as klaar en maak die volgende een oop.

AI tutor af. 'n Graad-14 polinoom op 25 punte pas te veel aan. Jy moet graad 14 behou en weight decay gebruik (ridge, van die bias en variance les), en kies die sterkte met die validation set.

Omdat jy alpha kies deur na die validation set te kyk, is die validation error nou 'n bietjie flatterend. Die poort gee jou punte op 'n aparte test set van 2,000 vars punte wat jou code nooit sien nie. Dit is die eerlike manier om 'n model wat jy aangepas het, te rapporteer.

Woorde en simbole in hierdie les
overfitting, onderpassing
pas die geraas in die opleidingsdata; of te eenvoudig om die patroon te pas
validasie set
held-back data wat gebruik word om instellings te kies
bias, varians
om die selfde manier verkeerd wees elke keer; of baie verander met die training data
ridge (alpha)
minste kwadraat met gewigverval van sterkte alpha
Jou beurt

Skryf fit(x, y) wat koëffisiënts teruggee (laagste mag eerste) vir 'n graad-14 polinoom. Dit moet 'n ridge oplossing wees, solve(A.T A + alpha I, A.T y) vir 'n alpha bo 0 (die toets kontroleer dit, so 'n kleiner polinoom met nulle sal nie tel nie). Slaag as die fout op die verstekte toetsverzameling onder 0.045 is en die gaping (toets minus opleiding) onder 0.05 is. Vir skaal: gewone least squares het 'n toetsfout van ongeveer 0.73, die beste moontlike alpha 'n toetsfout van ongeveer 0.034, en 'n alpha wat eerlik op die validasieverzameling gekies is, op enige sinvolle rooster soos magte van 10, 'n toetsfout van ongeveer 0.034 tot 0.039. 'n Plat, oormatige pas faal die 0.045 limiet.

AI af: geen tutor, wenke of uitgewerkte oplossing op hierdie een nie. Net jou eie denke.

Sien jy 'n probleem in hierdie les? Rapporteer dit · Vra oor hierdie les

Kode · loop in jou blutser
Uitset

        

Jou vordering word anoniem getel. Verander dit