Программа курса Урок 100 из 156 · Пакеты, DNS и IP-адреса
Пакеты, DNS и IP-адреса

Отслеживание по IP

Почему это важно Блокировка cookie не мешает сайту видеть ваш IP-адрес, и некоторые трекеры используют "IP-адрес плюс браузер" как замену ID. В этой лаборатории вы измерите, насколько хорошо это работает на смоделированной неделе, и увидите, что это одновременно слабее и опаснее, чем звучит.

IP-адрес немного похож на почтовый адрес многоквартирного дома. Он доводит пакеты до здания, но там может жить несколько человек, и люди переезжают.

Почему IP-адреса общие

Адресов старого образца (IPv4) не хватает на каждое устройство, поэтому сети их делят.

NAT: Network Address Translation: домашний роутер или офисный шлюз позволяет многим устройствам делить один публичный IP-адрес. Для сайтов каждый телефон и ноутбук дома выглядит как один и тот же адрес.

Carrier-grade NAT: тот же приём в большом масштабе у мобильной сети: тысячи телефонов делят небольшой пул адресов, и ваш телефон может получать другой адрес при каждом подключении.

User agent: короткий текст, который браузер отправляет с каждым запросом, называя браузер и систему, например Brook/31.0 (Laptop; OS-A). Многие люди отправляют ровно такой же.

Поэтому трекер, объединяющий их в один слабый ID, например 203.0.113.7 | Brook/31.0 (Laptop; OS-A), может ошибаться двумя способами:

  • Расщепление: один человек появляется под многими ID, потому что его телефон переходит между домашним Wi-Fi, офисом и мобильной сетью или его домашний адрес меняется.
  • Слияние: разные люди делят один ID, потому что делят офис или жильё и пользуются одним и тем же популярным браузером.

Для приватности опасно слияние: трекер может ошибочно приписать вам просмотры вашего соседа по квартире или раскрыть, что кто-то в вашем доме смотрел что-то деликатное.

Учебные данные

watched.leg5a_network.simulate_week(seed) даёт неделю визитов на один новостной сайт. Каждый визит - словарь:

{'day': 0, 'hour': 10, 'person': 'ana', 'device': 'laptop',
 'network': 'office', 'ip': '192.0.2.31',
 'user_agent': 'Brook/31.0 (Laptop; OS-A)'}

Сам сайт видит только ip и user_agent. Поле person - это истина, которую знает симулятор и никогда не знает настоящий сайт; вы используете его только чтобы оценить слабый ID. Дни идут от 0 (понедельник) до 6 (воскресенье).

Чтобы считать разные вещи, удобно set в Python: он хранит каждое значение один раз.

seen = set()
for v in visits:
    seen.add(v["ip"])
print(len(seen))   # how many different IPs

Чтобы найти самый частый элемент, посчитайте через словарь и возьмите наибольшее число через max(counts.values()).

На других языках

Построение слабого ID и подсчёт различных значений выглядят почти везде одинаково.

// JavaScript
const weakId = v => `${v.ip} | ${v.user_agent}`;
const ids = new Set(week.filter(v => v.person === "ana").map(weakId));
console.log(ids.size);
// Go
ids := map[string]bool{}
for _, v := range week {
    if v.Person == "ana" {
        ids[v.IP+" | "+v.UserAgent] = true
    }
}
fmt.Println(len(ids))
// PHP
$ids = [];
foreach ($week as $v) {
    if ($v['person'] === 'ana') { $ids[$v['ip'] . ' | ' . $v['user_agent']] = true; }
}
echo count($ids);

Защита

Для вас: VPN или ретранслятор заменяет ваш IP общим, а обновлённый браузер держит ваш user agent распространённым. Для сайтов, которые вы делаете: не считайте IP-адрес личностью. Как можно раньше сокращайте или удаляйте IP-адреса в логах (например, храните только первые три части адреса IPv4), потому что сырой IP плюс время могут указать на одно домохозяйство.

Итоги

  • IP-адрес принадлежит подключению, которое часто делят домохозяйство, офис или тысячи телефонов.
  • IP плюс user agent расщепляет одного человека на многие ID и сливает разных людей в один.
  • Слияние может ошибочно раскрыть чужие просмотры, поэтому ID на основе IP не только слабые, но и рискованные.
  • В собственных логах сокращайте или удаляйте IP-адреса пораньше.
Твоя очередь

WEEK - одна смоделированная неделя визитов. Напишите четыре функции:

  1. weak_id(visit): верните один текст, объединяющий visit["ip"] и visit["user_agent"], например ip + " | " + user_agent. Два визита должны получать один и тот же ID ровно тогда, когда совпадают обе части.
  2. ids_for_person(week, person): верните, сколько разных слабых ID несли визиты этого человека (0, если визитов нет).
  3. people_behind_id(week): верните словарь, сопоставляющий каждому слабому ID, сколько разных людей делали визиты под ним.
  4. stability(week, person): верните долю (от 0.0 до 1.0) визитов этого человека, сделанных под его самым частым слабым ID, или 0.0, если визитов нет.
Вывод внизу написан за вас. Тесты используют другие смоделированные недели, поэтому ответ нельзя вписать вручную.

Заметили проблему в этом уроке? Сообщите о ней · Спросить об этом уроке

Это упражнение откроется скоро

Закончи предыдущий урок, чтобы открылся этот. Весь курс бесплатный, аккаунт не нужен, и ты можешь прочитать этот урок прямо сейчас.