Temario Lección 53 de 246 · Módulo 4: Tu propio motor de autograd
Módulo 4: Tu propio motor de autograd

Un Tensor: un array que recuerda

Por qué importa El único tipo de datos del motor es un Tensor: un array más un hueco para su gradiente más una nota de dónde salió.

Un Tensor guarda tres cosas:

  • data: el array de NumPy con los valores.
  • grad: un array de la misma forma, que empieza en ceros, y que backward rellenará.
  • parents: los Tensor a partir de los que se calculó (vacío para las entradas y los pesos).

Cada operación crea un Tensor nuevo y graba sus padres. Hoy, solo la parte hacia delante de + y *: calcula los valores y recuerda los padres.

Tensor: en aprendizaje profundo, simplemente un array de n dimensiones. Aquí, un array que además lleva un gradiente y su historia.

Palabras y símbolos de esta lección
Tensor
aquí: un array más su gradiente más los Tensor de los que salió
.grad
el gradiente de la pérdida final respecto a este Tensor
unbroadcast
sumar un gradiente hasta devolverlo a la forma desde la que se estiró
Tu turno

Rellena __add__ y __mul__ para que devuelvan un Tensor nuevo cuyo data sea la suma o el producto, y cuyo parents sea (self, other). Los números normales también deberían funcionar, mediante Tensor.lift. Deja _backward en paz por ahora.

¿Has visto un problema en esta lección? Avísanos · Preguntar sobre esta lección

Este ejercicio se abre pronto

Termina la lección anterior y esta se desbloquea. Todo el curso es gratis, no hace falta cuenta, y puedes leer esta lección ahora mismo.