シラバス レッスン 246 中 63 · モジュール 4:自分の自動微分のエンジン
モジュール 4:自分の自動微分のエンジン

関門:新しい操作を加える(AI オフ)

なぜ大切か 操作をその逆向きの規則付きで加え、確かめることは、第 3 区間のすべての新しい層でまさにすることです。ここではひとりでします。このモジュールをもう知っている? ほかのレッスンの前に、先にこの関門を受けられます:合格するとこのモジュールが終わったことになり、次が開きます。

AI のチューターはオフです。エンジンに tanh、exp、log を、それぞれその逆向きの規則付きで加えてください。それぞれの局所的な傾きは自分で割り出してください(モジュール 2 の傾き。信頼する前に、それぞれ少しの動きで確かめること)。

このレッスンの言葉と記号
Tensor
ここでは:配列と、その勾配と、それがもとにした Tensor
.grad
この Tensor についての、最終的な損失の勾配
unbroadcast
勾配を、それが伸ばされる前の形まで合計して戻すこと
zero_grad
backward は勾配に足すので、次のステップの前に勾配をリセットすること
あなたの番

Tensor の 3 つのメソッドを書いてください。隠れたテストは、新しい入力で 3 つすべてを使う式の勾配を確かめます。

AI オフ:この問題ではチューター、ヒント、解答例はありません。自分の頭だけで考えましょう。

このレッスンに問題を見つけましたか?報告する · このレッスンについて質問する

コード · ブラウザで実行
出力

        

あなたの進捗は匿名で記録されています。 変更する