강의 계획 레슨 148개 중 117번째 · 도구 발명하기
도구 발명하기

로그 클러스터러

왜 중요한가 오류 줄 오백 개는 읽을 수 없어요. 개수가 붙은 패턴 열 개는 할 일 목록이에요. 하나를 다른 하나로 바꾸는 건 장애 때마다 쓸 도구예요.

로그 줄은 값을 채운 몇백 개의 log.info(...) 호출이 만들어요. 같은 호출에서 나온 줄은 그 값만 달라요. 각 값을 자리 표시자로 바꾸면 같은 호출의 줄은 똑같아지고, 묶기는 dict 하나예요.

INFO request handled in 12ms status=200      ->  INFO request handled in <NUM>ms status=<NUM>
INFO request handled in 340ms status=204     ->  (the same)

어려운 부분은 값이 어떻게 생겼는지 아는 거예요. 이 팀의 서비스에서 값은: 숫자(정수 또는 소수점이 있는 것, 가끔 ms나 s 같은 단위가 뒤따라요), 8글자 이상의 16진수 id, UUID, IPv4 주소(가끔 :port가 붙어요), 그리고 큰따옴표 안의 무엇이든(따옴표 값에는 공백과 숫자가 들어갈 수 있어요). 그 둘레의 단어는 코드가 고정해요.

내 차례

cluster(lines)를 쓰세요. 패턴 문자열을 그 패턴을 가진 줄의 인덱스 리스트로 매핑하는 dict를 반환하세요. 두 줄은 모든 값(위에 나열한 다섯 종류)을 자리 표시자로 바꾼 뒤 같을 때, 오직 그때만 패턴을 공유해야 해요. 패턴 문자열 자체는 마음대로 골라도 돼요. 이겨야 할 덫: 테스트는 두 서비스의 줄 500개를 쓰는데, 모든 종류의 값이 있고, 고정된 단어 하나만 다른 패턴 둘이 있어요.

이 레슨에서 문제를 발견했나요? 알려 주세요 · 이 레슨에 대해 묻기

이 연습은 곧 열려요

앞의 레슨을 마치면 이 레슨이 열려요. 강좌 전체가 무료이고 계정도 필요 없으며, 이 레슨은 지금 바로 읽을 수 있어요.