Programma Les 125 van 250 · Prompt Engineering voor AI Engineers
Prompt Engineering voor AI Engineers

Chain-of-Thought & Het parsen van het verzegeld antwoord

Voor alles wat redenering vereist (wiskunde, logica met meerdere stappen, zorgvuldige classificatie), het vragen aan een model om stap voor stap te denken voordat het antwoordt, verbetert de nauwkeurigheid meetbaar. De valkuil: nu geeft het model een muur van redenering, en je hebt nog steeds een schoon machineleesbaar antwoord aan de andere kant nodig.

De standaardtruc is om het model te laten eindigen op een vaste regel die je kunt parsen, zoals Answer: 42. Je bouwt de prompt die om die vorm vraagt, en je schrijft de parser die deze extraheert. Het model doet het redeneren daartussen (niet beoordeeld), maar de afspraak aan beide kanten is van jou.

A chain-of-thought antwoord ziet er zo uit:

There are 3 boxes with 4 apples each.
3 times 4 is 12.
Answer: 12

Bouw twee functies:

  • cot_prompt(question) geeft een prompt string terug die de vraag bevat, vraagt het model om stap voor stap te redeneren, en instrueert het om te eindigen met een regel in de exacte vorm Answer: <value>.
  • parse_final_answer(model_output) scant de output en geeft de waarde na de LAATSTE Answer: regel terug (niet hoofdlettergevoelig, gestript). Als er geen zo'n regel is, geef dan None.
  • terug.

A 2026 notitie: de expliciete instructie "denk stap voor stap" was ontworpen voor oudere modellen die niet kunnen nadenken. Moderne denkende of redenerende modellen doen dit al intern, dus het toevoegen van een handmatige chain-of-thought kan overbodig zijn of zelfs de kwaliteit schaden. Gebruik expliciete CoT vooral bij kleinere of niet-denkende modellen, of wanneer je de zichtbare stappen specifiek nodig hebt om te analyseren of te controleren.

Twee details zijn belangrijk. Last-line-wins: een model corrigeert zichzelf vaak ("Antwoord: 3 ... wacht, Antwoord: 5"), en de laatste regel is het echte antwoord, dus scan naar de onderkant. None when absent: als het model de regel nooit heeft geproduceerd, zeg dit dan eerlijk in plaats van te gokken, zodat de aanroeper het opnieuw kan proberen. Druk op Run om te beoordelen.

Jij bent aan de beurt

Schrijf cot_prompt(question) die een prompt retourneert die de vraag, de zin step by step en een Answer: instructie bevat. Schrijf parse_final_answer(model_output) dat de tekst zonder extra tekens retourneert na de LAATSTE regel die overeenkomt met Answer: (niet hoofdlettergevoelig), of None als er geen dergelijke regel bestaat.

Een probleem ontdekt in deze les? Meld het · Vraag naar deze les

Deze oefening opent binnenkort

Maak de les ervoor af voordat deze wordt ontgrendeld. De hele cursus is gratis, geen account nodig, en je kunt deze les nu lezen.