Программа курса Урок 85 из 246 · Модуль 6: Начальные веса и нормализация
Модуль 6: Начальные веса и нормализация

Контрольная задача: заставьте обучаться необучаемую глубокую сеть (ИИ выключен)

Почему это важно Починить глубокую сеть, которая не учится, - одна из самых частых настоящих задач в этой области. Здесь вы делаете это сами.

ИИ-наставник выключен. Сеть из 30 слоёв ниже никогда не выходит за пределы подбрасывания монетки. Можно менять то, как она запускается и как соединены её блоки, используя что угодно из этого модуля, но сохраните 30 скрытых слоёв ширины 16 и 300 шагов простого SGD.

Слова и символы этого урока
Xavier, LeCun, He
начальные разбросы sqrt(2 / (inputs + outputs)) или 1 / sqrt(inputs) для tanh и sqrt(2 / inputs) для ReLU
Твоя очередь

Отредактируйте build(rng) и forward(params, X) так, чтобы обучение достигало хотя бы 90% точности на обучении на лунах.

ИИ выключен: нет тьютора, подсказок или готового решения для этой задачи. Только ваши собственные мысли.

Заметили проблему в этом уроке? Сообщите о ней · Спросить об этом уроке

Это упражнение откроется скоро

Закончи предыдущий урок, чтобы открылся этот. Весь курс бесплатный, аккаунт не нужен, и ты можешь прочитать этот урок прямо сейчас.