Müfredat 156 dersinden 109. · Uygulamalar ve cihazlar
Uygulamalar ve cihazlar

Bir uygulama denetle

Neden önemli Bir trafik yakalaması uzun ve karmaşık bir listedir. Onu kullanışlı bir şeye dönüştüren beceri basittir: her alanı çek, sonra onları "kim aldı" ve "neydi" diye ayır. Bu denetimi bir pratik fitness uygulaması için yazacaksın ve aynı fikir okumana izin verilen her istek günlüğünde işe yarar.

Pratik yakalama

Pratik uygulamamız FitFox, kendi sitesi fitfox.example olan hayali bir adım sayacıdır. Yakalaması bir Python listesidir. Her öğe, bir interception proxy'nin kaydedeceği gibi bir istektir:

from watched.leg5b_apps import fitness_app_log

log = fitness_app_log()
print(len(log))      # 12
print(log[3])
# {'t': 3, 'device': 'phone', 'method': 'GET',
#  'url': 'https://sdk.adco.example/ad?idfa=00000000-0000-0000-0000-000000000000&slot=banner&lat=53.80&lon=-1.55',
#  'headers': {}, 'body': {}}

t uygulamanın açıldığı andan itibaren geçen saniyedir. headers istek başlıklarının bir sözlüğüdür. body uygulamanın gönderdiği, zaten bir sözlüğe çözümlenmiş veridir (verilerini adreste taşıyan GET istekleri için bu boştur).

SDK (yazılım geliştirme kiti): reklamlar, analizler, haritalar veya çökme raporları için başka bir şirketten alınan ve bir uygulamaya dahil edilen kod. Bir yakalamada, SDK o şirketin alan adlarına yapılan istekler olarak görünür.

Veri üç yerde gizlenir

Bir uygulama bir veri parçasını üç farklı yere koyabilir, sanki zarfın üzerine, zarftaki bir yapışkan notun üzerine veya mektubun içine yazıyormuş gibi:

  1. Sorgu dizisi: URL'in ? kısmından sonraki bölüm, name=value çiftleri & ile birleştirilmiş olarak.
  2. Headers: istek üzerindeki ekstra etiketler, örneğin X-Device-Id: D-7F3A9C.
  3. Gövde: bir POST isteğinin ana verisi.

Python's standart kütüphanesi bir sorgu dizisini senin için böler. urlsplit bir URL'i parçalara ayırır ve parse_qsl sorguyu bir (name, value) çiftleri listesine dönüştürür:

from urllib.parse import urlsplit, parse_qsl

parts = urlsplit("https://tiles.mapkit.example/v1/tile?lat=53.80&zoom=14")
print(parts.hostname)          # tiles.mapkit.example
print(parts.query)             # lat=53.80&zoom=14
print(parse_qsl(parts.query))  # [('lat', '53.80'), ('zoom', '14')]

İsimleri karşılaştırılabilir hale getirme

Aynı fikir bir gövdede device_id, bir başlıkta ise X-Device-Id şeklinde yazılabilir (X- "özel başlık" için eski bir alışkanlıktır). Karşılaştırmadan önce her ismi normalize et: küçük harfe çevir, - ifadesini _ yap ve baştaki x_ işaretini at. Uygulama dünyası bunu sana normalise_name:

olarak sunar.
from watched.leg5b_apps import normalise_name
print(normalise_name("X-Device-Id"))   # device_id

Değerler farklı türlerde gelir (gövdede 8412 gibi sayılar var). Her değeri str(value) ile bir stringe dönüştür, böylece hepsi aynı şekilde karşılaştırılır.

Neler neler sayılır

Pratik dünyası sana ayrıca iki set normalize edilmiş isim verir. IDENTIFIER_NAMES senin veya telefonunun ID'sini taşıyan isimleri tutar (device_id, user_id, idfa, email_sha256 ve benzerleri). LOCATION_NAMES nerede olduğunu söyleyen isimleri tutar (lat, lon, city, postcode ve benzerleri).

Zeroed ad ID: Bir iPhone uygulamasına seni takip etmemesini söylediğinde veya Android reklam kimliğini sildiğinde, kimliği isteyen uygulamalar 00000000-0000-0000-0000-000000000000 alır. Bu değer kimseyi tanımlamaz, bu yüzden bir tanımlayıcı olarak sayılmaz. ZERO_AD_ID içindedir. Bir sonraki ders neden göründüğünü açıklar.

Birinci taraf mı değil mi

A isteği, ana makinesi uygulamanın kendi sitesinden farklı bir site üzerindeyken SDK'ya gönderilir. site_of watched'den siteyi verir: site_of("cdn.fitfox.example") "fitfox.example"'dir ve site_of("sdk.adco.example") "adco.example"'dir.

Yaygın bir yanılgı

"Sadece tuhaf alan adlarına yapılan istekler önemli." FitFox kalp atış hızını ve tam konumunu kendi sunucusuna, hashlenmiş bir e-postayı ise partners.fitfox.example adresine gönderir. Bu sonuncusu birinci taraf gibi görünüyor ama sadece isim kimin yönettiğini söyleyemez. Denetimin bunu işaretlemeyecek; bir sonraki egzersiz işaretleyecek.

Diğer dillerde

JavaScript: URL ve URLSearchParams bir URL'yi böler.

function allFields(entry) {
  const norm = n => n.toLowerCase().replaceAll("-", "_").replace(/^x_/, "");
  const out = [];
  for (const [k, v] of new URL(entry.url).searchParams) out.push([norm(k), v]);
  for (const [k, v] of Object.entries(entry.headers)) out.push([norm(k), String(v)]);
  for (const [k, v] of Object.entries(entry.body)) out.push([norm(k), String(v)]);
  return out;
}

Go: net/url aynı işi yapar.

u, _ := url.Parse(rawURL)
for name, values := range u.Query() {
    for _, v := range values { fmt.Println(name, v) }
}
fmt.Println(u.Hostname())

Özet

  • Bir istekteki veriler üç yerde gizlenir: query string, headers ve body.
  • urlsplit ve parse_qsl bir URL'yi böler; isimleri normalleştirmek onları karşılaştırmanı sağlar.
  • A sıfırlanmış reklam ID'si kimseyi tanımlamaz, bu yüzden sayılmaz.
  • Siteleri karşılaştırmak çoğu SDK'yı bulur, ancak birinci taraf gibi görünen bir isim hala başkası tarafından çalıştırılabilir.
Senin sıran

İki fonksiyon yaz.

  1. all_fields(entry) bir log girişi için (name, value) tuple listesi döndürür: önce URL'in query string içindeki her çift (sırasıyla), sonra her header, sonra her body öğesi. Her isim normalise_name üzerinden geçer ve her değer str() ile bir string olur. Bunu kendin yaz; pratik dünyasının fields_of.
  2. fonksiyonunu kullanma.
  3. audit(entries, app_site) üç anahtarı olan bir dict döndürür, her biri tekrarsız bir sorted list:
    • "sdk_hosts": site_of(host) değeri app_site olmayan her host (urlsplit(url).hostname'den);
    • "identifiers": IDENTIFIER_NAMES içindeki gerçek bir değerle (ZERO_AD_ID değil ve boş değil) görünen her alan adı;
    • "location": LOCATION_NAMES içinde görünen her alan adı.
Son olarak report = audit(fitness_app_log(), "fitfox.example") çalıştır ve yazdır.

Bu derste bir sorun mu fark ettin? Bildir · Bu ders hakkında soru sor

Bu alıştırma yakında açılacak

Bu dersi bitirince bu ders açılacak. Kursun tamamı ücretsiz, hesap gerekmiyor ve bu dersi hemen şimdi okuyabilirsin.