Zero-shot vs few-shot: quando mostrar exemplos
Zero-shot significa que você só descreve a tarefa. Few-shot significa que você também cola alguns exemplos resolvidos antes da entrada real. Few-shot costuma melhorar a qualidade, mas custa tokens e latência em toda chamada, então é uma decisão de julgamento, não um reflexo.
A regra que se sustenta em produção:
- Se você não tem exemplos para mostrar, é zero-shot por definição. Não há o que acrescentar.
- Se a tarefa precisa de um formato de saída específico (um formato JSON preciso, um conjunto fixo de rótulos), exemplos são o jeito mais barato de fixá-lo. Vá de few-shot.
- Se a tarefa é um padrão difuso que uma descrição tem dificuldade de captar (tom, classificação de casos de borda, estilo), exemplos ensinam melhor que texto. Vá de few-shot.
- Caso contrário, uma instrução clara basta. Fique no zero-shot e economize os tokens.
Um bloco few-shot, para dar a intuição, só empilha exemplos antes da consulta:
Classify the sentiment.
Text: I love it -> positive
Text: total waste -> negative
Text: it is fine -> ?Você vai escrever a camada de decisão que escolhe a estratégia. Construa choose_strategy(task), em que task é um dict com n_examples_available (um int), needs_specific_format (um bool) e is_fuzzy_pattern (um bool). Retorne a string "zero-shot" ou "few-shot".
A ordem importa: sem exemplos é sempre zero-shot, mesmo que as outras flags sejam verdadeiras, porque você literalmente não tem nada para mostrar. Só quando existem exemplos as flags de formato e de padrão difuso empurram você para o few-shot. Clique em Run para avaliar.
Escreva choose_strategy(task), que retorna "zero-shot" ou "few-shot" a partir de um dict com as chaves n_examples_available (int), needs_specific_format (bool) e is_fuzzy_pattern (bool). Se não houver exemplos disponíveis, retorne sempre "zero-shot". Senão, retorne "few-shot" quando a tarefa precisar de um formato específico OU for um padrão difuso, e "zero-shot" quando não for nenhum dos dois.
Viu um problema nesta lição? Reporte-o · Pergunte sobre esta lição
Este exercício abre em breve
Termine a lição anterior para que esta seja desbloqueada. O curso inteiro é gratuito, não precisa de conta, e você pode ler esta lição agora mesmo.
Este navegador está bloqueando cookies para learn.floati.life, então as lições que você terminou aqui não podem abrir em ordem. Permita cookies para este site e recarregue.