Программа курса Урок 125 из 156 · Построй защиту
Построй защиту

Поломка

Почему это важно Каждая защита, которую вы построили в этом модуле, ломает что-то реальное, если она слишком строгая. Люди отключают защиту не потому, что они любят трекеры; они отключают ее, потому что поле для комментариев или оформление заказа перестали работать. Поэтому команда движка измеряет два числа вместе: сколько трекинга все еще работает и сколько сайтов сломалось. Эта лаборатория дает вам оба числа и просит вас сделать выбор.

Это как выбор дозы лекарства. Слишком мало и оно ничего не делает; слишком много и побочные эффекты хуже болезни. Правильная доза это самая маленькая, которая работает, и вы находите ее только путем измерения.

Breakage: функция сайта, которая перестает работать из-за защиты конфиденциальности: вход, который не удается, виджет, показывающий выход из системы, график, который рисует неправильно.

Уровень поломок: доля протестированных сайтов хотя бы с одной сломанной функцией. Три сломанных сайта из 20 это уровень 3 / 20 = 0.15, или 15 процентов.

Бюджет поломок: самый высокий уровень поломок, который команда готова принять перед выпуском, например 0.10 (два сайта из 20).

Тестовый стенд: 20 учебных площадок

watched.leg6b_harden создает 20 тренировочных сайтов (news.example, garden.example и так далее). Каждому нужны некоторые из этих функций для работы:

FeatureЧто нужноКакая защита может это сломать
liba скрипт из cdn.exampleблокировка каждой третьей стороны
mapsa кадр из maps.exampleблокировка каждой третьей стороны
комментариивиджет Talk, вошедший в систему после кликаразбиение без доступа к хранилищу
chartпиксели холста в пределах 2 от истиныфарблинг с слишком большим количеством шума
checkoutpay.example получает свой refудаление ссылок без списка разрешенных
loginsignin.example получает cid, state и codeудаление ссылок без списка разрешенных
linksсвязи между сайтами landблокировка навигации

Пять методов отслеживания работают на одних и тех же сайтах: сторонние куки, хранилище фреймов, скрипт фингерпринтинга, украшение ссылок и трекер отказов. Метод считается linked, когда он видит один и тот же ID на двух или более сайтах.

Готовые защиты

Вы сами написали каждую защиту ранее в этом модуле. Чтобы быстро сравнивать комбинации, watched.leg6b_presets имеет их готовыми, переключаемыми через config dict, и CANDIDATES содержит восемь именованных конфигов, от "nothing" до "balanced". Один вызов измеряет конфиг:

from watched.leg6b_presets import CANDIDATES, evaluate

result = evaluate(CANDIDATES["blocklist only"])
print(result["linked"])   # techniques that still link two sites
print(result["broken"])   # {site: [features that broke]}
print(result["sites"])    # 20

Что вы построите

  • breakage_rate(broken, total_sites): доля сайтов с чем-то сломанным.
  • feature_counts(broken): для каждой особенности, на скольких сайтах она сломалась. Это говорит вам which защиту смягчить.
  • choose(results, budget): из словаря name -> result, оставьте конфиги, у которых breakage rate входит в бюджет, затем выберите тот, где меньше связанных техник. При равенстве выбирайте меньший breakage rate, затем имя, которое идет первым по алфавиту. Верните None, если ничего не подходит.

Чтобы выбрать "наименьшее, затем самое низкое, затем первое имя" за один шаг, нужно сортировать по кортежу. Python сравнивает кортежи поэлементно, поэтому первый элемент решает всё, если только нет ничьей:

options = [("b", 0, 0.20), ("a", 0, 0.20), ("c", 1, 0.00)]
best = min(options, key=lambda o: (o[1], o[2], o[0]))
print(best)   # ('a', 0, 0.2): fewest linked first, then rate, then name

key=lambda o: ... говорит min что сравнивать. lambda это однострочная функция без имени: lambda o: o[1] означает "дано o, вернуть o[1]".

Чтение ваших результатов

Посмотрите на таблицу, которую вы вывели. Некоторые конфиги блокируют все пять техник, но ломают пятую часть веба; один блокирует четыре и ничего не ломает. Ни один из них не является неправильным сам по себе: Бюджет решает. Реальные движки работают так же. Они постепенно внедряют защиты, собирают отчеты об ошибках, ведут небольшие списки исключений для сайтов, которые в них нуждаются, и позволяют людям отключать защиту для одного сайта. Shields по сайтам от Floati (в браузере автора курса, все еще в разработке) это тот самый последний переключатель.

A распространенное заблуждение

"Нулевой разрыв означает, что защита безопасна для выпуска." Не само по себе: конфиг "nothing" тоже имеет нулевой разрыв. Разрыв имеет смысл только рядом с тем, сколько отслеживания вы остановили, поэтому choose нужны оба.

В других языках

Выбор в рамках Бюджета в JavaScript:

function choose(results, budget) {
  const ok = Object.entries(results)
    .map(([name, r]) => [name, r.linked.length, Object.keys(r.broken).length / r.sites])
    .filter(([, , rate]) => rate <= budget)
    .sort((a, b) => a[1] - b[1] || a[2] - b[2] || a[0].localeCompare(b[0]));
  return ok.length ? ok[0][0] : null;
}

Подсчет признаков в Go с помощью map:

counts := map[string]int{}
for _, features := range broken {
    for _, f := range features { counts[f]++ }
}

Итог

  • У каждой защиты есть цена взлома; измеряйте ее, не гадайте.
  • Оценивайте конфиг по двум числам вместе: работает ли отслеживание и частота поломок.
  • Посчитайте, какая функция ломается чаще всего, и ослабь защиту за ней, вместо того чтобы удалять её.
  • A breakage budget превращает расплывчатый компромисс в решение, которое можно протестировать.
Твоя очередь

Напишите breakage_rate(broken, total_sites) (количество сайтов в broken разделить на total_sites), feature_counts(broken) (словарь: feature -> количество сайтов, где это сломалось) и choose(results, budget), где results сопоставляет имя конфига с тем, что вернул evaluate. choose оставляет имена, чье breakage_rate(r["broken"], r["sites"]) не больше budget, и возвращает то с наименьшим количеством r["linked"]; при равенстве выбирайте меньший rate, затем имя первым по алфавиту; возвращайте None, если ничего не подходит. Затем постройте results = {name: evaluate(config) for name, config in CANDIDATES.items()} и установите best = choose(results, 0.10).

Заметили проблему в этом уроке? Сообщите о ней · Спросить об этом уроке

Это упражнение откроется скоро

Закончи предыдущий урок, чтобы открылся этот. Весь курс бесплатный, аккаунт не нужен, и ты можешь прочитать этот урок прямо сейчас.