シラバス レッスン 246 中 238 · モジュール 23:仕上げのスタジオ:走らせられるモデルカード
モジュール 23:仕上げのスタジオ:走らせられるモデルカード

アブレーション:3 つの変更、それぞれ 3 つのシード

なぜ大切か 「この変更が助けになった」はどのプロジェクトの報告でも最もよくある主張で、最もよくひとつの実行からなされるものです。ここではモジュール 22 の規則が、あなたの実行の上でそれを決めます。

基準への 3 つの変更を選んでください。それぞれちょうどひとつの設定(width、lr、steps、batch、weight_decay)を変えます。それぞれをシード 0、1、2 で走らせ、基準も同じシードでもう一度走らせます(どの数もひとつの場所にあるよう、このレッスンの記録に)。evals=1 を使ってください:要るのは最後の点数だけです。

それぞれの変更について:diff = 変更の平均の点数引く基準の平均の点数(高いほど良い)、se = judge.standard_error(baseline, change)。判定:diff > 2 se なら "better"、diff < -2 se なら "worse"、それ以外は "not shown"。

合計は予算に収まらなければなりません:より代価のかかる変更(より広い、より多くのステップ)は、それをより多く使います。

このレッスンの言葉と記号
基準
同じシードの上で、どの変更もそれと比べて測る素の実行
アブレーション
基準へのひとつの変更を、それが何をするかを見るためにいくつかのシードで走らせたもの
あなたの番

CHANGES(3 つ、それぞれひとつの設定)を設定してください。log を 12 の実行で、それぞれの変更について verdict[name] を埋めます。平均と 2 se を表示してください。

このレッスンに問題を見つけましたか?報告する · このレッスンについて質問する

この演習はまもなく開きます

その前のレッスンを終えると、このレッスンが解放されます。コース全体が無料でアカウントも不要、このレッスンは今すぐ読めます。