Mendiagnosis dari catatan saja
Kenapa ini penting Seringkali kamu tidak bisa menjalankan ulang apa pun: eksekusinya milik orang lain, atau memakan waktu seminggu. Yang kamu punya hanyalah apa yang dicatat. Dua eksperimen yang direkam dari kursus ini berisi kegagalan nyata.
Di gpt-width-lr, sebuah pengaturan dianggap rusak karena learning rate-nya jika loss held-out akhirnya, yang dirata-ratakan dari tiga seed yang dicatat, lebih buruk dari 0.5 dibandingkan pengaturan terbaik dengan lebar yang sama. Di cnn-depth-shortcuts, satu kali jalan dianggap macet jika akurasi tesnya persis sama di setiap epoch: itu menjawab satu kelas untuk semuanya (ada empat kelas bentuk, jadi sekitar 0.25).
Prediksi sebelum kamu lihat: run GPT mana yang rusak, dan CNN mana yang macet?
Isi
dengan pasangan (width, lr) dan broken dengan tripler (depth, shortcuts, seed) yang dihitung dari record. stuck memberikan tiga run dari satu setting. exp.seeds(d=..., lr=...)
Ada masalah di pelajaran ini? Laporkan · Tanya tentang pelajaran ini
Latihan ini akan segera dibuka
Selesaikan pelajaran sebelumnya agar pelajaran ini terbuka. Seluruh kursus ini gratis, tidak butuh akun, dan kamu bisa baca pelajaran ini sekarang.
Browser ini memblokir cookie untuk learn.floati.life, jadi pelajaran yang sudah kamu selesaikan di sini tidak bisa dibuka berurutan. Izinkan cookie untuk situs ini dan muat ulang.