강의 계획 레슨 156개 중 152번째 · 캡스톤: 프로젝트 하나 고르기
캡스톤: 프로젝트 하나 고르기

숨은 세계가 여러분을 채점하는 방법

왜 중요한가 정확히 무엇을 확인하는지 알면 짐작 대신 거기에 노력을 겨눌 수 있어요. 확인이 어떻게 작동하는지 알면 왜 공정한지도 알게 돼요: 아무도 답을 베껴서 통과할 수 없으니, 통과는 정말 그걸 만들었다는 뜻이에요.

운전면허 시험을 생각해 보세요. 집 근처 거리에서 모든 모퉁이를 알 때까지 연습해요. 시험 날 시험관은 한 번도 달려 본 적 없는 길을 골라요. 도로 규칙은 같지만 거리가 새로우니, 통과하는 유일한 방법은 정말 운전할 수 있는 거예요.

여러분의 구간 프로젝트 여럿이 정확히 이렇게 채점됐어요: 2구간 추적기 실습, 5구간 기기 보고서, 6구간 숨은 추적기 모음은 규칙은 같지만 사이트, 이름, 추적기, 방문자가 다른 숨은 세계에서 코드를 돌렸어요. 대표작 프로젝트를 한 걸음 더 나아가게 할 때, 그 걸음을 같은 방식으로 테스트하세요: 맞춰 조정하지 않은 세계에서요.

숨은 세계: 연습한 것과 같은 생성기로 만들었지만 다른 시드에서 나온, 본 적 없는 연습 세계. 채점에만 쓰여요.

시드: 무작위 생성기의 시작 숫자. 같은 시드는 언제나 같은 세계를, 다른 시드는 다른 세계를 만들어요. 그래서 채점이 모두에게 공정하면서도 여러분에게 새로울 수 있어요.

두 종류의 확인

  • 숨은 세계와 대조해 확인하는 보고서(2구간과 5구간 프로젝트). 코드가 숨은 세계를 보고 JSON 보고서를 쓰고, 확인은 그것을 실제로 거기 있다고 아는 것과 비교해요.
  • 숨은 테스트(대부분의 실습, 그리고 3, 4, 6, 7구간 프로젝트). 확인은 본 적 없는 입력으로 함수를 부르고 결과를 확인해요.

캡스톤 글(다음 레슨)은 기계가 채점하지 않아요: 사람에게 보여 주는 부분이에요. 그래서 자동 확인은 기계가 공정하게 판단할 수 있는 것에 머물러요.

JSON: 대괄호 속 리스트와 중괄호 속 라벨 붙은 값으로 된 데이터를 위한 평범한 글 형식. Python dict와 리스트는 거의 일대일로 JSON이 돼요.

보고서 확인은 어떻게 생겼나

보고서는 구조화된 발견일 뿐이에요. 3구간 프로젝트를 한 걸음 더 나아가 연습 가게의 전체 감사로 만든다면, 보고서는 이렇게 생길 수 있어요:

{
  "site": "shopa.example",
  "third_parties": ["adco.example", "cdn.example"],
  "trackers": ["adco.example"],
  "cookies": [{"name": "uid", "domain": "adco.example", "third_party": true}],
  "csp_present": false
}

채점기는 그것에 대해 평범한 질문 몇 개를 해요. 올바른 JSON인가? 필요한 필드가 올바른 타입으로 있나? 그리고 각 발견에 대해: 정말 숨은 세계에 있나?

맞힘, 놓침, 거짓 경보

화재경보기는 두 가지 다른 방식으로 맞거나 틀릴 수 있어요. 진짜 불이 났는데 조용할 수 있고(놓침), 토스트만 구웠는데 울릴 수 있어요(거짓 경보). 좋은 경보기는 둘 다 낮게 지켜요. 여러분의 발견도 같은 방식으로 판단돼요.

참 양성: 무언가를 보고했고 그게 정말 거기 있어요. 거짓 양성: 거기 없는 무언가를 보고했어요(거짓 경보). 거짓 음성: 무언가 거기 있는데 보고하지 않았어요(놓침).

숨은 세계에서 차단기가 추적기 요청 20개와 평범한 요청 80개를 본다고 해 봐요. 추적기 19개를 막고, 실수로 페이지가 필요로 한 평범한 요청 1개도 막아요. 맞힘 19, 놓침 1, 거짓 경보 1이에요. 2구간에서 이런 개수를 정밀도(막은 것 중 정말 추적기였던 것의 수)와 재현율(진짜 추적기 중 잡은 것의 수)로 바꿨어요.

프로젝트의 통과 규칙은 강좌 계획의 것처럼 읽힐 수 있어요: "추적기 요청의 적어도 95%를 막고, 거짓 양성 없음". 여기서 20개 중 19개는 정확히 95%이지만, 잘못 막은 요청 하나가 여전히 실패하게 해요. 프라이버시 도구에서는 두 실수 다 중요해요: 놓침은 추적을 통과시키고, 거짓 경보는 페이지를 망가뜨려 사람들이 도구를 끄도록 가르쳐요.

같은 코드, 같은 점수

채점은 결정적이에요: 같은 숨은 세계에서 같은 코드를 돌리면 언제나 같은 결과를 얻어요. 프로젝트가 속도를 확인하는 곳에서는 시계의 시간이 아니라 예산에 대한 연산 수를 세니, 느린 노트북이라고 점수가 깎이지 않아요.

내기 전에 여러분 자신의 보고서 확인하기

실패한 제출 대부분은 틀린 생각이 아니라, 빠진 필드나 오타예요. 아주 작은 자가 확인이 그걸 잡아요:

import json

report = {"site": "shopa.example", "trackers": ["adco.example"], "csp_present": False}

def missing_fields(report, required):
    # return the required field names that the report does not have
    return [name for name in required if name not in report]

print(missing_fields(report, ["site", "third_parties", "trackers", "csp_present"]))
# ['third_parties']  -> add it before you submit
print(json.dumps(report, indent=2, sort_keys=True))
다른 언어로

코드가 아니라 보고서를 채점하니, JSON을 쓰는 어떤 언어든 돼요(그래서 직장에서 쓰는 언어로 대표작을 다시 만들 수 있어요).

JavaScript:

const report = { site: "shopa.example", trackers: ["adco.example"], csp_present: false };
const required = ["site", "third_parties", "trackers", "csp_present"];
console.log(required.filter(name => !(name in report)));  // [ 'third_parties' ]
console.log(JSON.stringify(report, null, 2));

Go:

type Report struct {
    Site       string   `json:"site"`
    Trackers   []string `json:"trackers"`
    CSPPresent bool     `json:"csp_present"`
}
out, _ := json.MarshalIndent(Report{Site: "shopa.example", Trackers: []string{"adco.example"}}, "", "  ")
fmt.Println(string(out))

C#:

var report = new { site = "shopa.example", trackers = new[] { "adco.example" }, csp_present = false };
Console.WriteLine(System.Text.Json.JsonSerializer.Serialize(report));

흔한 오해

"연습 세계 점수가 100%이니 숨은 점수도 그럴 것이다." 언제나는 아니에요. 코드가 연습 세계에서 베낀 추적기 이름 목록처럼 연습 세계의 세부에 조용히 기대면, 숨은 세계의 추적기를 놓칠 거예요. 그걸 과적합이라고 해요: 그 뒤의 규칙 대신 본 예시에 맞추는 것. 내기 전에 다른 시드로 만든 연습 세계 몇 개(예: 평소 것과 함께 build_world(seed=2))에서 로직을 테스트하세요.

요약

  • 숨은 세계 채점은 본 적 없는 시드의 세계에서 작업을 돌리니, 베낀 답은 실패하고 진짜 실력은 통과해요.
  • 어떤 프로젝트는 숨은 세계의 JSON 보고서로, 대부분은 숨은 테스트로 채점하고, 캡스톤 글은 채점기가 아니라 사람을 위한 거예요.
  • 발견은 맞힘, 놓침, 거짓 경보로 판단해요. 두 종류의 실수 다 쳐요.
  • 채점은 결정적이고 시계 시간이 아니라 연산을 세요. 내기 전에 보고서의 필드를 자가 확인하세요.

이 레슨에서 문제를 발견했나요? 알려 주세요 · 이 레슨에 대해 묻기

이 연습은 곧 열려요

앞의 레슨을 마치면 이 레슨이 열려요. 강좌 전체가 무료이고 계정도 필요 없으며, 이 레슨은 지금 바로 읽을 수 있어요.