Chương trình học Bài 104 trên tổng số 156 · Dấu vân tay mạng
Dấu vân tay mạng

Dấu vân tay TLS (JA3 và JA4)

Vì sao điều này quan trọng Việc phát hiện bot và gian lận, cùng một số bên theo dõi, nhận ra các trình duyệt bằng cách băm ClientHello của chúng. Tự viết hai công thức nổi tiếng nhất cho thấy chính xác một trình duyệt có thể bị nhận ra ra sao trước khi trang nào tải, và vì sao một thay đổi trình duyệt năm 2023 đã làm hỏng công thức cũ hơn.

Một dấu vân tay ở đây giống như mô tả ai đó bằng chính xác thứ tự họ liệt kê các kỹ năng của mình. Viết danh sách ra, nén nó thành một mã ngắn, và bạn có thể so sánh các mã thay vì những danh sách dài.

Hàm băm (hash): một hàm nén bất kỳ văn bản nào thành một mã ngắn có kích thước cố định. Cùng văn bản luôn cho cùng mã; văn bản khác cho mã khác. MD5 và SHA-256 là hai hàm băm trong hashlib của Python.

JA3: nối mọi thứ theo thứ tự, rồi băm

JA3, công bố năm 2017, viết năm trường dưới dạng số thập phân, nối mỗi list bằng dấu gạch ngang, nối năm trường bằng dấu phẩy, và lấy hàm băm MD5. Các giá trị GREASE bị bỏ ra.

version,ciphers,extensions,groups,point_formats
771,4866-4865-4867-49196,0-10-11-13-16,29-23-25-24,0     (shortened)
md5 -> a 32-character hex code

Vì nó giữ thứ tự, hai trình duyệt đưa ra cùng tính năng theo thứ tự khác nhau sẽ có mã JA3 khác nhau. Đó từng là một điểm mạnh, cho tới khi các trình duyệt thay đổi.

Thay đổi năm 2023: extension bị xáo trộn

Từ Chrome 110 (đầu năm 2023), Chrome bắt đầu đặt các extension TLS của mình theo thứ tự ngẫu nhiên ở mỗi kết nối (kiểm tra vào tháng Mười 2026). Mục đích là ngăn máy chủ phụ thuộc vào một thứ tự cố định, thứ làm giao thức khó thay đổi hơn. Một tác dụng phụ: mã JA3 của Chrome trở nên khác nhau ở gần như mọi kết nối, nên JA3 không còn nhận ra nó như một thứ duy nhất được nữa.

JA4: sắp xếp trước, rồi băm

JA4, ra mắt năm 2023, sửa điều đó bằng cách sắp xếp các cipher suite và extension trước khi băm, nên việc xáo trộn không gây khác biệt gì. Nó cũng bắt đầu bằng một phần ngắn đọc được. Một mã JA4 có hình dạng này (hai hàm băm ở đây là bịa ra): t13d1516h2_1a2b3c4d5e6f_0f9e8d7c6b5a:

  • t cho TCP, 13 cho TLS 1.3, d vì một tên miền đã được gửi (i nếu không), 15 cipher suite, 16 extension, h2 từ ký tự đầu và cuối của giá trị ALPN đầu tiên.
  • Rồi 12 ký tự hex đầu tiên của một SHA-256 của các cipher suite đã sắp xếp.
  • Rồi 12 ký tự từ các extension đã sắp xếp (không có tên máy chủ và ALPN, những thứ phụ thuộc vào trang, không phải trình duyệt).

Bài thực hành của ta dựng một mã kiểu JA4 đơn giản hóa với cùng ba phần. JA4 thật còn gồm các thuật toán chữ ký trong phần cuối; ta bỏ chúng ra cho ngắn. Một ghi chú về giấy phép cho người xây dựng: JA4 (dấu vân tay TLS client) theo giấy phép BSD, trong khi phần lớn phần còn lại của họ JA4+ dùng giấy phép FoxIO (kiểm tra vào tháng Mười 2026).

Python bạn cần

import hashlib
hashlib.md5("abc".encode()).hexdigest()          # 32 hex characters
hashlib.sha256("abc".encode()).hexdigest()[:12]  # first 12
"-".join(str(n) for n in [771, 4865])            # '771-4865'
"%04x" % 4865                                     # '1301' (4-digit hex)
"%02d" % 7                                        # '07'

Thế giới luyện tập cho bạn client_hello(browser, connection, seed) cho ba trình duyệt hư cấu: Brook (thêm GREASE và xáo trộn extension), Cobalt (thêm GREASE, thứ tự cố định) và Fennel (không cái nào). Các con số của chúng là mã thật trong sổ đăng ký nhưng theo những tổ hợp không trình duyệt thật nào dùng, nên không gì ở đây bắt chước một trình duyệt thật. GREASE là set các giá trị GREASE.

Trong các ngôn ngữ khác

Các công cụ lấy dấu vân tay trong nhiều ngôn ngữ tính JA3 và JA4. Phần lõi JA3 trong vài ngôn ngữ:

// JavaScript (Node.js)
const crypto = require("crypto");
const clean = xs => xs.filter(x => !GREASE.has(x)).join("-");
const s = [h.version, clean(h.ciphers), clean(h.extensions),
           clean(h.groups), clean(h.point_formats)].join(",");
const ja3 = crypto.createHash("md5").update(s).digest("hex");
// Go
sum := md5.Sum([]byte(s))
ja3 := hex.EncodeToString(sum[:])
// sorting for JA4: sort.Slice(ciphers, func(i, j int) bool { return ciphers[i] < ciphers[j] })
// Rust (sha2 crate)
use sha2::{Digest, Sha256};
let mut c = ciphers.clone();
c.sort();
let text = c.iter().map(|n| format!("{:04x}", n)).collect::<Vec<_>>().join(",");
let part_b = &format!("{:x}", Sha256::digest(text.as_bytes()))[..12];

Cách phòng thủ

Bạn không thể ngừng gửi ClientHello. Thứ bảo vệ người bình thường là trở nên phổ biến: một trình duyệt phổ biến, cập nhật chia sẻ dấu vân tay với hàng triệu người khác, nên nó nói rất ít về bạn. Một cấu hình khác thường, như một trình duyệt cũ hay bị sửa đổi nhiều, sẽ nổi bật. Bài 106 quay lại với điều này.

Tóm tắt

  • JA3 nối các trường ClientHello theo thứ tự và lấy MD5; nó bỏ qua GREASE.
  • Chrome bắt đầu xáo trộn thứ tự extension từ Chrome 110 (đầu năm 2023), điều này làm JA3 của nó thay đổi ở mỗi kết nối.
  • JA4 sắp xếp cipher suite và extension trước khi băm, nên thay đổi thứ tự không quan trọng.
  • Một trình duyệt phổ biến, cập nhật chia sẻ dấu vân tay với nhiều người, đó là sự bảo vệ thật sự.
Đến lượt bạn

Mỗi hello là một dict từ client_hello(...) với version, supported_versions, ciphers, extensions, groups, point_formats, sni và alpn. Viết bốn hàm:

  1. strip_grease(values): một list mới không có giá trị nào trong GREASE, theo thứ tự ban đầu.
  2. ja3_string(hello): version, rồi ciphers, extensions, groups và point_formats, mỗi cái đã bỏ GREASE và nối bằng -; năm trường nối bằng ,.
  3. ja3(hello): digest hex MD5 của ja3_string(hello).
  4. ja4_style(hello): ba phần nối bằng _. Phần a là t, rồi 13 nếu 772 nằm trong supported_versions nếu không thì 12, rồi d nếu sni được đặt nếu không thì i, rồi số cipher và số extension (đã bỏ GREASE), mỗi số hai chữ số, rồi ký tự đầu và cuối của giá trị ALPN đầu tiên (00 nếu list rỗng). Phần b là 12 ký tự đầu của digest hex SHA-256 của các cipher đã sắp xếp, mỗi cái viết dưới dạng hex 4 chữ số ("%04x") và nối bằng ,. Phần c là như vậy cho các extension đã sắp xếp, bỏ ra 0 và 16.
Phần so sánh in ở cuối đã được viết sẵn cho bạn.

Bạn thấy vấn đề gì trong bài học này? Hãy báo cáo nó · Hỏi về bài học này

Bài tập này sẽ sớm mở.

Hoàn thành bài học trước đó để mở khóa bài này. Toàn bộ khóa học là miễn phí, không cần tài khoản, và bạn có thể đọc bài học này ngay bây giờ.