Conteúdo do curso Lição 117 de 148 · Invente suas ferramentas
Invente suas ferramentas

Um agrupador de logs

Por que isso importa Quinhentas linhas de erro são ilegíveis. Dez padrões com contagens são uma lista de tarefas. Transformar um no outro é uma ferramenta que você usará em cada incidente.

As linhas de log

são feitas por algumas centenas de chamadas log.info(...) com valores preenchidos. Linhas da mesma chamada diferem apenas nesses valores. Se você substituir cada valor por um placeholder, as linhas da mesma chamada se tornam idênticas, e o agrupamento é um dicionário.

INFO request handled in 12ms status=200      ->  INFO request handled in <NUM>ms status=<NUM>
INFO request handled in 340ms status=204     ->  (the same)

A parte difícil é saber como um valor se parece. Nos serviços desta equipe, os valores são: números (inteiros ou com ponto decimal, às vezes seguidos por uma unidade como ms ou s), ids hexadecimais de 8 ou mais caracteres, UUIDs, endereços IPv4 (às vezes com :port) e qualquer coisa entre aspas duplas (valores entre aspas podem conter espaços e dígitos). As palavras ao redor deles são fixadas pelo código.

Sua vez

Escreva cluster(lines). Retorne um dicionário que mapeia uma string de padrão para a lista de índices das linhas com esse padrão. Duas linhas devem compartilhar um padrão exatamente quando forem iguais após cada valor (os cinco tipos listados acima) for substituído por um placeholder. A própria string de padrão é sua para escolher. Armadilha para vencer: os testes usam 500 linhas de dois serviços, com cada tipo de valor, e dois padrões que diferem por uma única palavra fixa.

Viu um problema nesta lição? Reporte-o · Pergunte sobre esta lição

Este exercício abre em breve

Termine a lição anterior para que esta seja desbloqueada. O curso inteiro é gratuito, não precisa de conta, e você pode ler esta lição agora mesmo.