Chương trình học Bài 52 trên tổng số 246 · Mô-đun 4: Bộ máy autograd của riêng bạn
Mô-đun 4: Bộ máy autograd của riêng bạn

Con số đi xuôi, gradient đi ngược

Vì sao điều này quan trọng Trước khi dựng bộ máy, hãy xem chính xác nó phải làm gì, trên năm con số.

Hãy chạy hoạt ảnh và bước qua nó thật chậm. Để ý hai điều. Đi xuôi, mỗi ô chỉ cần các đầu vào của nó. Đi ngược, mỗi ô chỉ cần gradient tới từ ô sau nó, và độ dốc cục bộ của chính nó. Tính cục bộ đó là điều làm một bộ máy trở nên khả thi: mỗi phép toán chỉ cần biết quy tắc nhỏ của riêng nó.

Tóm tắt Gradient tại một ô = gradient tới từ sau nó, nhân độ dốc cục bộ của ô. Ở chỗ một ô cấp cho hai ô khác, hãy cộng những gì quay về từ cả hai.

Đến lượt bạn

Những con số mới, cùng công thức L = (a * b + c) ** 2, với a = 1, b = 4, c = -2. Hãy tự tay tính ra (không cần mã ngoài các con số) và gán grad_a, grad_b và grad_c.

Bạn thấy vấn đề gì trong bài học này? Hãy báo cáo nó · Hỏi về bài học này

Bài tập này sẽ sớm mở.

Hoàn thành bài học trước đó để mở khóa bài này. Toàn bộ khóa học là miễn phí, không cần tài khoản, và bạn có thể đọc bài học này ngay bây giờ.