シラバス レッスン 156 中 33 · 内側から見る HTTP
内側から見る HTTP

生の HTTP のリクエストを解析する

なぜ大切か 読み込むどのページも、ブラウザがサーバーに送る短いテキストから始まり、そのテキストこそが追跡の情報のほとんどが運ばれる場所です。Cookie、来たページ、言語。それを読めるようになれば、何も隠されなくなり、この部のどの道具(トラッカー、ブロッカー、測定)もその上に作られています。

HTTP のリクエストを、とても厳しい書式の手紙だと考えてください。最初の行が何を求めているかを言い、次に封筒にラベル付きのメモが続き、次に空の行、それから(ときには)中身が来ます。レスポンスは同じ書式の返事の手紙です。ブラウザは 1 日に何千通もこれを書いて読んでいます。

HTTP:HyperText Transfer Protocol。ブラウザとサーバーが、ページ、画像、データを求めたり送ったりするのに使う、取り決めた書式です。

リクエスト:ブラウザが送るメッセージです。メソッド(取ってくる GET やフォームを送る POST のような、何をするか)、ターゲット(サーバーのどのパスか)、バージョン からなります。

ヘッダー:メッセージの中のラベル付きのメモひとつで、Accept-Language: en-GB のように、独立した行に Name: value と書きます。

生のリクエストはどう見えるか

練習用のブラウザが ShopA のテントのページのために送ったリクエストです。どの行も、Python では \r\n と書く、復帰と改行という 2 つの見えない文字で終わります。空の行(つまり \r\n\r\n が並ぶ)が、頭の部分の終わりを示します。

GET /p/tent HTTP/1.1
Host: shopa.example
User-Agent: PracticeBrowser/1.0 (Linux) Practice Firefox 144
Accept-Language: en-ZA
Sec-Fetch-Site: none
Sec-Fetch-Mode: navigate
Sec-Fetch-Dest: document
  • リクエストの行:GET /p/tent HTTP/1.1、ひとつの空白で区切った 3 つの部分。
  • ヘッダー:1 行にひとつ、名前、コロン、それから値。
  • 空の行:頭の部分の終わり。
  • 本文:その後に続くもの何でも。GET にはふつうなく、フォームの POST は user=sam のようなフォームの欄を運びます。

レスポンスも同じ形ですが、最初の行は 状態の行 HTTP/1.1 200 OK です。真ん中の部分が 状態コード(200 は問題なし、302 は「別の所へ行って」、404 は「見つからない」)で、残りは 理由の句、つまり空白を含むこともあれば(Moved Permanently)まったくないこともある、人のためのラベルです。

状態コード:レスポンスの始めにある、どうだったかを言う 3 桁の数です。2xx は成功、3xx はリダイレクト、4xx はリクエストの問題、5xx はサーバーの問題です。

必要な Python の 3 つの道具

text.partition(sep) は 最初の sep で分割し、3 つのかけらを返します。前、区切り、後です。text.split(sep, 2) は最大 2 回だけ分割するので、空白のある理由の句はひとかたまりのままです。text.strip() は両端の空白を取り除きます。

"Referer: https://shopa.example/".partition(":")
# ('Referer', ':', ' https://shopa.example/')
"HTTP/1.1 301 Moved Permanently".split(" ", 2)
# ['HTTP/1.1', '301', 'Moved Permanently']

よくある間違い

ヘッダーの行を すべての コロンで分割すること。Referer: https://shopa.example/ は値の中にコロンがあるので、line.split(":") はアドレスを半分に切ってしまいます。常に最初のコロンだけで分割してください。本物のブラウザは痛い目を見てこれを学びました。いい加減な解析器は、2 つのプログラムが同じメッセージを違うように読む、セキュリティのバグの古典的な源です。

本物のウェブは今もこう見えるか?

考え方はほぼそのままです。今日のブラウザはふつう HTTP/2 か HTTP/3 を話し、同じメソッド、ヘッダー、本文を、テキストの行ではなくバイナリのフレームに詰めて送ります。それでも DevTools はそれをテキストとして見せてくれるので、ここで学ぶ項目は、そこで見るものとまったく同じです(2026 年 10 月確認)。練習用の世界はすべてを HTTP/1.1 のテキストとして書き、それは今も多くのサーバーや道具が使っているものです。

試してみよう DevTools(F12、Mac なら Cmd+Option+I)を開き、Network タブを選んで、どれかのページを再読み込みしてください。最初のリクエストをクリックし、Request Headers を見ます。多くのブラウザには、頭の部分をちょうどこの書式で見せる「Raw」の切り替えがあります。

ほかの言語では

JavaScript:

function parseRequest(raw) {
  const [head, ...rest] = raw.split("\r\n\r\n");
  const lines = head.split("\r\n");
  const [method, target, version] = lines[0].split(" ");
  const headers = lines.slice(1).map(line => {
    const i = line.indexOf(":");            // first colon only
    return [line.slice(0, i).trim(), line.slice(i + 1).trim()];
  });
  return { method, target, version, headers, body: rest.join("\r\n\r\n") };
}

Go:

// the standard library has a real parser: net/http.ReadRequest
req, err := http.ReadRequest(bufio.NewReader(strings.NewReader(raw)))
if err == nil {
    fmt.Println(req.Method, req.URL.Path, req.Header.Get("User-Agent"))
}

Rust:

let (head, body) = raw.split_once("\r\n\r\n").unwrap_or((raw, ""));
let mut lines = head.split("\r\n");
let mut first = lines.next().unwrap().splitn(3, ' ');
let (method, target) = (first.next(), first.next());
let headers: Vec<(&str, &str)> = lines
    .filter_map(|l| l.split_once(':'))
    .map(|(n, v)| (n.trim(), v.trim()))
    .collect();

まとめ

  • リクエストは、リクエストの行、ヘッダー、空の行、それから任意の本文です。レスポンスは代わりに状態の行で始まります。
  • 頭の部分と本文を最初の \r\n\r\n で分け、各ヘッダーをその最初のコロンで分けます。
  • 理由の句は空白を含むことも、ないこともあるので、状態の行は最大 2 回だけ分割します。
  • HTTP/2 と HTTP/3 は同じ項目をバイナリで運ぶので、この見取り図はそのまま通用します。
あなたの番

"method"、"target"(パスとクエリ)、"version"、"headers"(最初のコロンで分割し、両方の空白を除いた (name, value) の組の、順序を保ったリスト)、"body"(最初の空の行より後のすべて、なければ "")を持つ辞書を返す parse_request(raw) を書いてください。次に、同じように "version"、"status"(int)、"reason"(なければ "")、"headers"、"body" を返す parse_response(raw) を書きます。

このレッスンに問題を見つけましたか?報告する · このレッスンについて質問する

この演習はまもなく開きます

その前のレッスンを終えると、このレッスンが解放されます。コース全体が無料でアカウントも不要、このレッスンは今すぐ読めます。