Программа курса Урок 125 из 250 · Промпт-инжиниринг для ИИ-инженеров
Промпт-инжиниринг для ИИ-инженеров

Цепочка рассуждений и разбор финального ответа

Для всего, что требует рассуждений (математика, многошаговая логика, тщательная классификация), просьба к модели думайте шаг за шагом перед ответом заметно улучшает accuracy. Подвох в том, что теперь модель выдает стену рассуждений, а вам все равно нужен чистый машиночитаемый ответ на выходе.

Стандартный трюк заключается в том, чтобы заставить модель заканчивать на фиксированной строке, которую можно разобрать, например Answer: 42. Вы создаете prompt, который требует такую форму, и пишете parser, который извлекает ее. Модель выполняет reasoning между ними (ungraded), но контракт с обеих сторон ваш.

Ответ

A chain-of-thought выглядит так:

There are 3 boxes with 4 apples each.
3 times 4 is 12.
Answer: 12

Создайте две функции:

  • cot_prompt(question) возвращает строку prompt, которая содержит вопрос, просит модель рассуждать шаг за шагом и направляет ее закончить строкой в точном виде Answer: <value>.
  • parse_final_answer(model_output) сканирует вывод и возвращает значение после ПОСЛЕДНЕЙ строки Answer: (без учета регистра, без пробелов). Если такой строки нет, верните None.

A 2026 заметка: явная инструкция "думайте шаг за шагом" была создана для старых моделей без функции размышления. Современные модели размышления уже делают это внутри, поэтому добавление ручного chain-of-thought может быть лишним или даже ухудшить качество. Используйте явный CoT в основном с маленькими или моделями без размышления, или когда вам нужны видимые шаги для анализа или аудита.

Две детали имеют значение. Побеждает последняя строка: модель часто исправляет себя ("Answer: 3 ... подождите, Answer: 5"), и последняя строка это настоящий ответ, поэтому сканируйте до самого низа. None при отсутствии: если модель никогда не выдала эту строку, скажите об этом честно вместо того, чтобы гадать, чтобы вызывающий код мог повторить попытку. Нажмите Run чтобы оценить.

Твоя очередь

Напишите cot_prompt(question), возвращающий prompt, который содержит вопрос, фразу step by step и директиву Answer:. Напишите parse_final_answer(model_output), который возвращает очищенный текст после ПОСЛЕДНЕЙ строки, соответствующей Answer: (без учета регистра), или None, если такой строки нет.

Заметили проблему в этом уроке? Сообщите о ней · Спросить об этом уроке

Это упражнение откроется скоро

Закончи предыдущий урок, чтобы открылся этот. Весь курс бесплатный, аккаунт не нужен, и ты можешь прочитать этот урок прямо сейчас.