Kurrikulum Leson 233 van 246 · Module 22: Beoordeel aansprake
Module 22: Beoordeel aansprake

Een reël agter elke "is dit werklik" kontrole

Waarom dit saak maak Hierdie kursus het verskille in ten minste vier maniere beoordeel: 'n gepaaide interval (Module 9), "0.1 hoër en hoër op elke seed" (Modules 16 en 17), en 2 standaardfoute (hierdie module). Hulle is almal dieselfde idee. As jy dit weet, kan jy die regte een kies en weet wanneer een te ruim is.

Elke reël vergdyk 'n difference met sy noise. Twee keuses verander die antwoord:

  • Paar of nie. Wanneer beide modelle op dieselfde items geskopre (Module 9 se toetsbeelde), trek item vir item eerste af: hoe moeilik elke item is, kanselleer mekaar, die geraas krimp, en klein werklike verskille wys. Vir twee klassifiseerders op dieselfde items, is die skoonste telling net die items waar hulle verskil (McNemar's test). Seeds van aparte runs is nie gepaar nie: vergelyk die twee groepe as geheel.
  • Hoe streng die afsnypunt is. 2 standaardfoute gaan daarvan uit dat jy die geraas ken. Met 3 sade per kant het jy dit vanaf 3 nommers elk beraken, en daardie skatting kan maklik te klein wees. Student's t hanteer dit: die afsnypunt word stats.t.ppf(0.975, df) standaardfoute, waar df (die grados van vryheid) uit Welch se formule kom, df = (va + vb)**2 / (va**2 / (na - 1) + vb**2 / (nb - 1)) met va = var(a) / na. Met 3 sade per kant is df 2 tot 4, en die afsnypunt 2.8 tot 4.3, nie 2.

Voorspel eerste: op die aangetekende rooster, gaan die strenger afsnypunt ooit 'n "shown" van die 2 standaardfout-reël oorskur?

Woorde en simbole in hierdie les
seed
die nommer wat 'n loop se willeke keuses vasstel; 'n ander seed gee 'n ander resultaat
standaardfout
hoeveel sou 'n gemeete verskil skuif as die seeds heruitvoer word
Jou beurt

Stel my_guess in op "yes" of "no". Skryf welch(a, b) wat (diff, se, df) teruggee vir twee lysse van seed losses (diff = mean(a) - mean(b): positief wanneer b, die groter model, beter is). Vul dan vir elke geval in CASES die result[case] met 'n dict: 'ratio' (diff / se), 'cutoff' (die t cutoff), 'two_se' en 't' ("shown" of "not shown" deur elke reël). Stel disagree in op die lys van gevalle waar die twee reëls verskil.

Sien jy 'n probleem in hierdie les? Rapporteer dit · Vra oor hierdie les

Hierdie oefening open binnekort

Voltooi die lesie voor dit en hierdie een sal ontvanklik wees. Die hele kursus is gratis, geen rekening nodig nie, en jy kan hierdie les nou lees.