Silabus Pelajaran 242 dari 246 · Modul 23: Capstone studio: kartu model yang bisa kamu jalankan
Modul 23: Capstone studio: kartu model yang bisa kamu jalankan

Tulis kartu modelnya

Kenapa ini penting Model card (Mitchell et al. 2019) adalah cara sebuah model diberikan ke orang lain: apa itu, bagaimana cara melatihnya, seberapa baik kinerjanya, dan di mana model tidak diuji. Kebanyakan kartu ditulis dari ingatan. Milikmu diperiksa berdasarkan run log milikmu.

Pelajaran ini menjalankan ulang baseline dan hasil akhir kamu (seed 0) ke log baru, memberikan skor pada model akhir di set tersembunyi, dan memberikan angka kepada kamu. Tulis kartu sebagai dictionary dengan field ini:

  • track, final settings (dict FINAL), weights (ukuran model akhir), training FLOPs (biayanya)
  • baseline validation score, validation score, hidden score, hidden interval [low, high]
  • finding (satu kalimat dengan dua nomor probe kamu), ablations (satu kalimat per perubahan dengan hasilnya), limitations (apa yang tidak diuji: setidaknya satu kalimat lengkap)

Pengecekan membandingkan setiap angka dengan log dan skor tersembunyi, hingga 4 angka di belakang koma. Lalu jawab daftar periksa mandiri dengan jujur: True atau False untuk setiap baris.

Kata dan simbol di pelajaran ini
baseline
dasar jalannya setiap perubahan diukur terhadap, dengan seed yang sama
ablation
one ubah ke baseline, jalankan di beberapa seed, untuk lihat apa yang terjadi
kartu model
Catatan singkat tentang apa itu model, bagaimana ia dilatih, seberapa baik kinerjanya dan di mana ia tidak diuji
Giliranku

Isi card dan checklist.

Ada masalah di pelajaran ini? Laporkan · Tanya tentang pelajaran ini

Latihan ini akan segera dibuka

Selesaikan pelajaran sebelumnya agar pelajaran ini terbuka. Seluruh kursus ini gratis, tidak butuh akun, dan kamu bisa baca pelajaran ini sekarang.