Kurrikulum Leson 91 van 250 · Jou eerste Masjienleer-modelle
Jou eerste Masjienleer-modelle

Evaluering van Modelle: Akkuraatheid en Fout

Die

A-getoë model is nutteloos totdat jy kan sê hoe goed dit is. Die regte telling hang af van wat jy voorspel.

Klasifikasie: akkuraatheid

Wanneer die label 'n kategorie is (spam of nie, spesies A/B/C), is die eenvoudigste telling accuracy: die breuk van voorspellings wat korrek was.

from sklearn.metrics import accuracy_score

acc = accuracy_score(y_true, y_pred)   # e.g. 0.875 means 7 of 8 right

Accuracy loop van 0 tot 1. Maar "goed" is relatief. As 95 persent van e-pos nie spam is nie, kry 'n lui model wat altyd "not spam" raai reeds 'n punt van 0.95 terwyl dit geen spam vang nie. Vergelyk altyd teen daardie soort naive baseline voordat jy 'n getal vier.

Regression: fout

Wanneer die label 'n deurlopende getal is (soos 'n prys of 'n temperatuur), maak akkuraatheid geen sin nie, jy sal amper nooit die presiese waarde voorspel nie. Jy meet eerder hoe ver jy fout was. 'n Algemene keuse is mean absolute error, die gemiddelde grootte van die fout:

from sklearn.metrics import mean_absolute_error

mae = mean_absolute_error(y_true, y_pred)   # in the same units as y

MAE is in die etiket se eie eenhede, wat dit maklik maak om te lees: 'n MAE van 12 op huispryse in duisende beteken jy is gemiddeld ongeveer 12k uit. Laer is beter, en 0 is perfek.

Jy gaan albei bereken: 'n akkuraatheid vanaf die gegee voorspellings, en 'n MAE vanaf 'n klein lineêre regressie-pas op 'n perfek reguit lyn (so sy fout moet feitliklik nul wees).

Jou beurt

Deel 1: arrays y_true en y_pred (8 labels elk, wat presies op een plek verskil) word gegee. Stel acc = accuracy_score(y_true, y_pred). Deel 2: X en target beskryf die lyn y = 2x. Pas 'n LinearRegression genaamd reg op hulle toe, voorspel op X in reg_pred, en stel dan mae = mean_absolute_error(target, reg_pred).

Sien jy 'n probleem in hierdie les? Rapporteer dit · Vra oor hierdie les

Hierdie oefening open binnekort

Voltooi die lesie voor dit en hierdie een sal ontvanklik wees. Die hele kursus is gratis, geen rekening nodig nie, en jy kan hierdie les nou lees.