Müfredat 246 dersinden 235. · Modül 22: İddiaları yargılamak
Modül 22: İddiaları yargılamak

Kapı sınavı: bir iddiayı incele (yapay zekâ kapalı)

Neden önemli Sonuçları eleştirel okumak her makalede, model kartında ve kıyaslama tablosunda kullanacağın bir beceridir. Kurallar basit; hangisinin önemli olduğu söylenmeden onları her seferinde uygulamak, beceri budur.

Kapı sınavı kuralları: yapay zekâ öğretmeni kapalı. review(claim) yaz. Bir iddia "A modeli B modelini yener" der ve her modelin her tohumunun kaybı ile test setinin eğitim verisinde bulunan payıyla gelir. Sırayla:

  1. Test setinin %10'undan fazlası eğitim verisindeyse "leaked" döndür: üzerindeki hiçbir puana güvenilemez.
  2. Modellerden birinin 2'den az tohumu varsa "not shown" döndür: yayılım bilinmiyor.
  3. diff = mean(B) - mean(A) (A daha iyiyse pozitif) ve se = sqrt(var(A) / nA + var(B) / nB), örneklem varyanslarıyla (ddof=1). diff > 2 se ise "shown", diff < -2 se ise "contradicted", aksi halde "not shown" döndür.

Kontrol, fonksiyonunu her kontrolde farklı altı yeni iddia üzerinde, uç durumlar dahil çalıştırır: tek tohum, tam %10 örtüşme, tam olarak anlaşan tohumlar.

Bu dersteki kelimeler ve semboller
bulaşma (sızıntı)
eğitim verisinde de bulunan test öğeleri
tohum
bir çalıştırmanın rastgele seçimlerini sabitleyen sayı; başka bir tohum başka bir sonuç verir
Senin sıran

review'u doldur. {'a': [1.689, 1.675, 1.689], 'b': [1.715, 1.721, 1.707], 'test_overlap': 0.0} üzerinde dene (1.5 milyon token'da kaydedilmiş 1024 ve 512 genişlikleri).

AI kapalı: bu ödevde eğitmen, ipucu veya çözümlü örnek yok. Sadece kendi düşüncen.

Bu derste bir sorun mu fark ettin? Bildir · Bu ders hakkında soru sor

Bu alıştırma yakında açılacak

Bu dersi bitirince bu ders açılacak. Kursun tamamı ücretsiz, hesap gerekmiyor ve bu dersi hemen şimdi okuyabilirsin.