Программа курса Урок 225 из 246 · Модуль 21: Взгляд внутрь модели
Модуль 21: Взгляд внутрь модели

Чтение признака и проверка прочтения

Почему это важно Признак получает имя по своим лучшим примерам. Это имя - гипотеза, и большинство опубликованных меток признаков никогда не проверяется на тексте, которого не видел автор метки.

Загрузите записанный разреженный автокодировщик курса (256 признаков, l1 0,3, обучен за 2 000 шагов по 512 векторов, дольше, чем позволяет урок, и с одинаковыми признаками на каждой машине) и выберите для нескольких строк признак, наиболее специфичный для позиций, где текст заканчивается этой строкой. Затем пометьте его и проверьте метку на отложенном тексте:

  • точность (precision): из отложенных мест, где признак сильно срабатывает (выше половины своего наибольшего значения на обучении), доля тех, где текст действительно заканчивается строкой;
  • полнота (recall): из отложенных мест, заканчивающихся строкой, доля тех, где он срабатывает.

interp.top_contexts(sae, A, X, model, k) показывает, где признак k срабатывает сильнее всего, в виде текста до этого символа.

Сначала предскажите: признак для "tra" сильнее всего срабатывает на " before tra" и " layers tra" (начало "train"). Будет ли метка "tra" верна большую часть времени на новом тексте?

Слова и символы этого урока
разреженный автокодировщик
широкий слой, обученный восстанавливать векторы из нескольких активных признаков за раз
точность, полнота (метки)
из мест, где срабатывает признак, доля тех, к которым подходит метка; из мест, к которым подходит метка, доля тех, где он срабатывает
Твоя очередь

Присвойте my_guess значение "yes" или "no". Напишите check(k, s), возвращающую (precision, recall) на отложенных векторах, где признак срабатывает в месте, когда его значение там выше половины его наибольшего значения на обучающих векторах (F[:, k].max()). Заполните results[s] = check(feature_for(s), s) для " the", "ing" и "tra". Присвойте honest_label строки, чья метка выдерживает проверку (precision не меньше 0,7), а really - трёхбуквенное окончание, на котором признак "tra" срабатывает чаще всего в отложенном тексте.

Заметили проблему в этом уроке? Сообщите о ней · Спросить об этом уроке

Это упражнение откроется скоро

Закончи предыдущий урок, чтобы открылся этот. Весь курс бесплатный, аккаунт не нужен, и ты можешь прочитать этот урок прямо сейчас.