シラバス レッスン 246 中 51 · モジュール 4:自分の自動微分のエンジン
モジュール 4:自分の自動微分のエンジン

つかみ:数字を読む道具を訓練する 10 行

なぜ大切か モジュール 3 では、すべての勾配を手で書きました。本物のネットワークには何十もの層の種類があり、誰も毎回それを手で導きはしません。自動微分のエンジンがそれをしてくれ、このモジュールの終わりにはあなたがひとつ書いています。

最初の行は、これから作る完成したエンジンを import します(来るレッスンをあなたが解くものに保つため、見えないところに置いてあります)。データのあとの 10 行を見てください。ネットワークを作り、数字でそれを訓練し、どこにも勾配の式に触れていません。loss.backward() がそのすべてを割り出します。

まず曲線を当てる:エポック 1 のあととエポック 10 のあとの平均の訓練の損失を推測してください。

自動微分:自動的な微分です。書くのは前向きの計算だけで、エンジンがそれを記録し、連鎖律を逆向きに動かしてすべての勾配を計算します。

このレッスンの言葉と記号
自動微分
自動的な勾配:前向きのたどりを書き、エンジンが逆向きをする
Tensor
ここでは:配列と、その勾配と、それがもとにした Tensor
zero_grad
backward は勾配に足すので、次のステップの前に勾配をリセットすること
あなたの番

my_guess を埋め、それから動かしてください。10 行の訓練の行を読み、何が欠けているかに気づいてください。

このレッスンに問題を見つけましたか?報告する · このレッスンについて質問する

この演習はまもなく開きます

その前のレッスンを終えると、このレッスンが解放されます。コース全体が無料でアカウントも不要、このレッスンは今すぐ読めます。