Цепочка рассуждений и разбор финального ответа
Для всего, что требует рассуждений (математика, многошаговая логика, тщательная классификация), просьба к модели думайте шаг за шагом перед ответом заметно улучшает accuracy. Подвох в том, что теперь модель выдает стену рассуждений, а вам все равно нужен чистый машиночитаемый ответ на выходе.
Стандартный трюк заключается в том, чтобы заставить модель заканчивать на фиксированной строке, которую можно разобрать, например Answer: 42. Вы создаете prompt, который требует такую форму, и пишете parser, который извлекает ее. Модель выполняет reasoning между ними (ungraded), но контракт с обеих сторон ваш.
A chain-of-thought выглядит так:
There are 3 boxes with 4 apples each.
3 times 4 is 12.
Answer: 12Создайте две функции:
cot_prompt(question)возвращает строку prompt, которая содержит вопрос, просит модель рассуждать шаг за шагом и направляет ее закончить строкой в точном видеAnswer: <value>.parse_final_answer(model_output)сканирует вывод и возвращает значение после ПОСЛЕДНЕЙ строкиAnswer:(без учета регистра, без пробелов). Если такой строки нет, вернитеNone.
A 2026 заметка: явная инструкция "думайте шаг за шагом" была создана для старых моделей без функции размышления. Современные модели размышления уже делают это внутри, поэтому добавление ручного chain-of-thought может быть лишним или даже ухудшить качество. Используйте явный CoT в основном с маленькими или моделями без размышления, или когда вам нужны видимые шаги для анализа или аудита.
Две детали имеют значение. Побеждает последняя строка: модель часто исправляет себя ("Answer: 3 ... подождите, Answer: 5"), и последняя строка это настоящий ответ, поэтому сканируйте до самого низа. None при отсутствии: если модель никогда не выдала эту строку, скажите об этом честно вместо того, чтобы гадать, чтобы вызывающий код мог повторить попытку. Нажмите Run чтобы оценить.
Напишите cot_prompt(question), возвращающий prompt, который содержит вопрос, фразу step by step и директиву Answer:. Напишите parse_final_answer(model_output), который возвращает очищенный текст после ПОСЛЕДНЕЙ строки, соответствующей Answer: (без учета регистра), или None, если такой строки нет.
Заметили проблему в этом уроке? Сообщите о ней · Спросить об этом уроке
Это упражнение откроется скоро
Закончи предыдущий урок, чтобы открылся этот. Весь курс бесплатный, аккаунт не нужен, и ты можешь прочитать этот урок прямо сейчас.
Этот браузер блокирует cookies для learn.floati.life, поэтому завершенные здесь уроки не могут открыться по порядку. Разрешите cookies для этого сайта и перезагрузите страницу.