Диалог и есть метод

Ты отправляешь аккуратно написанный запрос. Приходит близкое, но неправильное — причём неправильное так, что трудно назвать словами, чем именно.

Здесь разговор раздваивается. Один человек стирает всё, пишет промпт заново и стреляет ещё раз — и ещё, охотясь за волшебной формулировкой. Другой читает ответ как улику, меняет одну вещь и попадает со второго-третьего раза. Модель та же. Разница целиком в том, что делают с первым ответом.

Первый ответ — не результат. Это замер.

Читай ответ как отчёт

Прежде чем оценивать качество, прочитай ответ как свидетельство того, что модель поняла. Это единственное окно в то, как разобрали твой бриф, и обычно провал сам себя называет.

Три поломки — три разных лечения:

Общо: вроде правда, но невесомо. Пустовала графа «материал». Она отвечает из среднего, потому что ты не дал ничего конкретного, на чём стоять. Лечение: положи на стол свои документы, цифры и примеры. Переформулировка не поможет.

Конкретно, но не то. Не хватило планки. Модель сделала разумный выбор, с которым ты не согласен. Лечение: назови критерий, который ты нёс молча, — «в каждом разделе нужен конкретный пример», «никакой рекомендации без цены вопроса».

Ответ на другой вопрос. Двусмысленной была сама задача. Это единственный случай, когда переписать с нуля правильно, — запрос действительно сказал не то, что ты имел в виду.

В девяти случаях из десяти это первые два варианта, и оба чинятся добавлением, а не переформулировкой.

Правь адресно

«Сделай лучше» — самое бесполезное указание из существующих. Лучше по какой оси? Ты просишь шарик закатиться неизвестно куда: получишь другой ответ, а не лучший, причём часто с тем же дефектом в новых словах.

Правка с адресом: «Разделы 2 и 4 нормальные, не трогай. Вступление длинное — сократи до трёх предложений и начни с вывода. Везде, где в разделе 3 есть утверждение, добавь цифру или убери утверждение».

Две привычки усиливают это в разы:

Говори, что сохранить. Без этого правка регулярно уносит куски, которые уже были в порядке. «Оставь всё, кроме X» — дешёвая фраза с большим эффектом.

Меняй по одной оси за круг. Тон, длина и структура в одном сообщении дают новый ответ, по которому невозможно понять, что сработало. Последовательные правки сходятся быстрее одной большой просьбы всё переписать — и в конце у тебя остаётся правило, годное на следующий раз.

А когда слова не даются, работает приём из прошлой статьи: показывай, а не объясняй. Вставь один переписанный абзац и скажи «вот такой регистр по всему тексту». Одна демонстрация бьёт четыре прилагательных.

Итерируй на дешёвом

Самая частая трата — итерации по готовому тексту. Получил три страницы, не понравилось, получил ещё три: каждый круг дорого делать и дорого читать.

Подними итерацию выше по течению. Попроси сначала план, или десять тезисов, или подход одним абзацем. Спорь с этим — оно в десять раз короче, и именно там живут настоящие решения. И только когда скелет верный, проси полный текст.

Та же логика годится для любой длинной работы: сначала согласовать план, потом исполнять. Восьмая статья превращает это в метод для сложных задач; здесь это просто самое дешёвое место для итераций.

Может ли она раскритиковать себя

Наполовину — и граница тут важна.

Просьба к модели разобрать собственный результат помогает, когда есть настоящий внешний сигнал, с которым можно сверяться: код, который запускается и падает; тест; чек-лист, который ты дал; документ, по которому проверяются утверждения. Примерно это и показала работа Self-Refine (Мадаан и др., 2023): сгенерируй, раскритикуй, перепиши — качество растёт.

Без такого сигнала самопроверка гораздо слабее, чем выглядит. В работе Large Language Models Cannot Self-Correct Reasoning Yet (Хуан и др., 2023) модели, которых просили пересмотреть собственные рассуждения без внешней обратной связи, регулярно меняли правильные ответы на неправильные: самокритика давала движение, а не точность. Это тот же урок, что и в четвёртой статье, с другой стороны: проверка, оставшаяся внутри контура, — не проверка.

Поэтому пользуйся осознанно. «Сверь это с чек-листом и перепиши» — хороший ход: он отделяет критика от автора, а критик в новом ходе не обязан защищать только что написанное. Но относись к его замечаниям как к списку кандидатов на рассмотрение, а не как к проверке. Суждение остаётся за тобой.

Когда остановиться

У итераций есть дно, и его регулярно проскакивают. Три круга без реального прогресса означают одно из двух: либо стол завален неудачными попытками и тянет вниз каждый новый ответ (вторая статья — новый чат, перенести только лучший фрагмент), либо конкретно эту задачу быстрее дописать руками.

Второе стоит сказать прямо, потому что после двадцати минут вложений признавать это никому не хочется: последние двадцать процентов часто быстрее набрать самому. Выбивание из модели одной конкретной финальной фразы может стоить дороже, чем написать эту фразу. Забери восемьдесят процентов и доделай. Это не поражение: взять у модели объём, а полировку сделать самому — часто самый быстрый маршрут из возможных.

Сохраняй то, что сработало

Запрос, давший отличный результат, — не сообщение, а инструмент, которым ты теперь владеешь. Скопируй его куда-нибудь. Небольшой личный файл вида «бриф, который работает для протоколов встреч / для код-ревью / для писем клиентам» накапливается быстрее любых промпт-хитростей и служит сырьём для постоянной настройки из восемнадцатой статьи.

И последняя сцепка с «Как учиться»: практика без обратной связи не улучшает навык, а закрепляет то, что ты и так делаешь. Итерация с моделью — необычайно быстрый цикл обратной связи, но обратную связь даёшь ты. Расплывчатая не учит ничему ни одну из сторон; конкретная и ответ улучшает сейчас, и твоё собственное понимание того, что здесь значит «хорошо». Цикл ровно настолько хорош, насколько хорошо то, что ты в него кладёшь.

На практике

Читай первый ответ как диагноз. Какая графа пустовала — материал, планка или сама задача?

Никогда не пиши «сделай лучше». Назови ось, место и цель.

Сначала скажи, что сохранить, потом — что менять.

Итерируй по плану, а не по готовому тексту. Дешёвый артефакт — дешёвый круг.

Три неудачных круга — это перезапуск или руки. Не «постараться сильнее».

Сохраняй сработавшие промпты. Это активы, а не история переписки.

Проверь себя

Закрой статью и ответь своими словами:

1. Почему первый ответ полезнее как информация, чем как продукт?
2. Три способа, которыми ответ бывает неправильным, — как их различить и что требует каждый?
3. Почему «сделай лучше» — плохое указание и что вместо него?
4. Почему за круг стоит менять только одну ось?
5. Когда просьба к модели раскритиковать себя реально полезна, а когда хуже, чем бесполезна?
6. Что могут означать три неудачных круга подряд?

Коротко

• Первый ответ — замер. Сначала читай его как свидетельство понимания, потом оценивай как продукт.
• Общий ответ — не хватило материала. Не те решения — не хватило планки. Ответ на другой вопрос — двусмысленная задача, единственный случай, когда правильно переписать с нуля.
• Правь адресно: что сохранить, что менять, где и на что. Одна ось за круг.
• Когда слова не работают — покажи: один переписанный абзац бьёт четыре прилагательных.
• Итерируй по планам и структурам, а не по готовому тексту.
• Самокритика помогает при внешнем сигнале (Self-Refine, 2023) и вводит в заблуждение без него (LLMs Cannot Self-Correct Reasoning Yet, 2023). Её замечания — кандидаты, а не проверка.
• Три круга без прогресса: новый чат или доделать руками. Последние двадцать процентов часто быстрее написать самому.
• Сработавшие промпты — активы, храни их.
• Первый ответ — не результат. Это замер.