Fracaso productivo: XOR con una neurona
Por qué importa Fallar aquí a propósito te enseña, mejor que cualquier explicación, por qué las redes necesitan más de una capa.
XOR ("o exclusivo") vale 1 cuando exactamente una de dos entradas vale 1. Cuatro puntos: (0,0) es 0, (0,1) es 1, (1,0) es 1, (1,1) es 0. Tu trabajo: hacer que tu neurona logística de la lección anterior acierte los cuatro. Prueba cualquier tasa de aprendizaje, cualquier número de pasos y cualquier semilla.
Aquí la neurona empieza con pesos aleatorios. Eso importa: si empezara con todo ceros, en XOR su gradiente sería exactamente 0 por simetría (los cuatro puntos tiran igual en direcciones opuestas), así que nunca se movería. Ese es otro fallo distinto del que trata esta lección, así que lo descartamos.
Dedica unos minutos a intentarlo de verdad antes de leer la pista. Pelearse primero es lo importante: la investigación sobre el aprendizaje ve que quien intenta un problema antes de que le enseñen la idea la entiende mejor después.
Palabras y símbolos de esta lección
- neurona
- w . x + b, y luego una activación
- pesos (w, W), sesgo (b)
- los números que aprende una neurona; el sesgo desplaza su salida
- sigmoide
- 1 / (1 + exp(-z)): aplasta cualquier número entre 0 y 1
- tasa de aprendizaje (lr)
- lo grande que es cada paso de entrenamiento
Usa train_logistic(X, y, lr, steps, seed) con XOR con al menos tres ajustes distintos, y pon la exactitud de cada resultado en my_attempts. Luego pon en reason la letra de la explicación verdadera:
A: necesita más pasos. B: una sola neurona solo puede dividir el plano con una recta, y ninguna recta separa XOR. C: la tasa de aprendizaje está mal. D: cuatro puntos son demasiado pocos para aprender.
¿Has visto un problema en esta lección? Avísanos · Preguntar sobre esta lección
Este ejercicio se abre pronto
Termina la lección anterior y esta se desbloquea. Todo el curso es gratis, no hace falta cuenta, y puedes leer esta lección ahora mismo.
Este navegador está bloqueando las cookies de learn.floati.life, así que las lecciones que terminaste aquí no se pueden abrir en orden. Permite las cookies de este sitio y recarga.