Conteúdo do curso Lição 92 de 148 · A lição da mentira
A lição da mentira

Confiante e errado

Por que isso importa Um modelo de linguagem escreve uma resposta errada com a mesma voz calma e bem formatada de uma correta. O tom não te diz nada. Um teste que falha te diz tudo.

Fluência é para o que esses modelos são treinados, então não custa nada para eles. Correção é uma propriedade separada, e o texto não mostra qual você está obtendo. Conselhos que parecem prática estabelecida ("apenas tente de novo", "esta regex é a padrão", "nome e tamanho são suficientes") são os mais perigosos, porque não convidam a um segundo olhar.

Em um estudo da Stanford, pessoas que escreveram código sensível à segurança com um assistente de IA escreveram código menos seguro do que pessoas sem um, e tiveram mais probabilidade de acreditar que seu código era seguro (Perry et al. 2023). A mesma lacuna aparece para velocidade: em um teste de 2025, desenvolvedores experientes de código aberto usando ferramentas de IA levaram mais tempo em suas tarefas enquanto acreditavam que tinham sido mais rápidos (METR 2025). O quão confiante você se sente sobre uma resposta não é uma medida dela.

Prove isso, não discuta

Quando um conselho parece estranho, a resposta mais forte não é um argumento melhor. É um pequeno teste que falha no código sugerido e passa em uma versão correta. Um argumento pode ser contestado. Um teste que falha encerra a discussão, e ele fica na base de código para que o erro não retorne.

Counterexample: uma entrada concreta onde a afirmação é falsa. Uma é suficiente para derrubar "isso sempre funciona".

Como este módulo funciona

Cada lição mostra um conselho plantado com código. O conselho foi escrito para o curso e está errado de propósito, de formas que conselhos reais estão errados. Você escreve um teste. Ele roda contra o código aconselhado, vários parentes próximos dele e uma versão correta escondida. Ele deve passar na correta e pegar o suficiente das outras.

Resumo Fluent não está correto. Transforme uma dúvida em um contraexemplo, e transforme o contraexemplo em um teste.

Viu um problema nesta lição? Reporte-o · Pergunte sobre esta lição

Este exercício abre em breve

Termine a lição anterior para que esta seja desbloqueada. O curso inteiro é gratuito, não precisa de conta, e você pode ler esta lição agora mesmo.