Как оценить ответ по рубрике, а не по ощущению «гладко»

В компании «Север» на столе два ответа по заявке 184. Один корявый: короткие фразы, дата как в листе, новой даты нет. Второй гладкий: вежливый абзац и срок, которого клиент не получал. Гладкий почти уходит, потому что его приятнее читать. Корявый точнее, и это видно только если смотреть не на звук, а на графы.

Гладкий абзац выигрывает у корявого, даже когда корявый держит факты. На заявке 184 цена такого выбора — письмо со сроком, который отдел не назначал. Рубрика из трёх пунктов возвращает спор к листу. Ниже она собрана так, чтобы отметку мог поставить автор задачи, без баллов и без вкуса.

Пункт 1: каждое число и имя есть во вводных

Первая графа — факты. Каждое число, дата, имя, номер заявки и название склада в ответе должны находиться во вводных, которые вы сами положили в запрос. Для заявки 184 это номер 184, дата отгрузки из листа и те имена, которые в листе есть. Синоним «примерно тот же склад» не считается попаданием.

Читают не абзац целиком, а по одному факту. Нашли во вводных — в графе можно идти дальше. Не нашли — пункт уже «нет», даже если остальной текст бережный. Один чужой факт ломает ответ целиком. Не усредняйте его с удачными соседними фразами.

Имя, которое модель привела к «нормальному» виду, тоже сверяют. Сокращение, перевод, более известное написание — это уже другое имя, если во вводных было иначе. В графу записывают то, что стоит в ответе, и то, что стоит в листе. Расхождение видно на бумаге, не в памяти.

Пункт 2: нет утверждений, которых во вводных не было

Вторая графа ловит лишнее. Лишнее — не только выдуманная дата. Это причина задержки, обещание «уже согласовали», оценка клиента, ссылка на разговор, которого в заявке 184 нет. Если утверждение нельзя ткнуть пальцем во вводные, его не было.

Гладкость часто живёт именно здесь. Модель дописывает типичное деловое письмо: готовность, срок, уверенность. Типичное не равно вашему листу. Во второй графе типичное без опоры получает «нет».

Не смягчайте лишнее словами «скорее всего автор имел в виду». Автор задачи — вы, и вы этого не имели в виду, раз во вводных пусто. Графа не обсуждает намерение модели. Она спрашивает, было ли утверждение на входе.

Карандаш на первой графе не потому, что вторая меньше значит. Пока факты не сверены, спор о форме рано. Как устроен весь проход перед отправкой клиенту, если рубрики трёх пунктов мало и письмо уже почти готово, — в гайде проверка ответа перед клиентом. Здесь только сами три графы и кто имеет право их заполнить.

Пункт 3: форма, которую просили, а не «ещё полезные мысли»

Третья графа — форма. Если просили шесть предложений и три части — что подтвердили, чего нет во вводных, следующий шаг — ответ из двух экранов и блока «дополнительные соображения» эту графу не проходит. Полезные мысли, которых не просили, здесь такой же промах, как обрезанная форма.

Форму записывают в бриф до прогона, не после. Иначе гладкий длинный текст всегда покажется «даже лучше, чем просили». На заявке 184 лучше не нужно. Нужно то, что коллега узнает как ваш статус и сможет сверить за минуту.

Сюда же относится тон, только если тон был частью формы и показан примером. Голое «сделай живее» третьей графой не работает: его нельзя отметить да или нет. Как ставить форму в сам запрос, без надежды на вкус, — в гайде как писать промпты.

Как ставить «да/нет», не баллы до десятых

На каждую графу — да или нет. Не балл, не «почти», не доля попадания. «Почти все факты на месте» прячет одну чужую дату. Одна чужая дата на заявке 184 и есть провал первой графы.

Да ставят, только если графа выполнена целиком. Один лишний срок — «нет» по второй, даже если остальные фразы чистые. Одна простыня вместо шести предложений — «нет» по третьей, даже если факты верные. Соседние «да» не перетягивают.

Баллы до десятых здесь вредны дважды. Их нечем обосновать перед коллегой, и они создают ощущение точности там, где было ощущение. Две отметки спорят меньше, чем шкала. Если два человека расходятся на «да/нет», они открывают вводные и смотрят строку. Со шкалой они спорят о вкусе и называют это оценкой.

Пустую графу не заполняют «потом». Пустое — это не «да». Письмо с пустой графой клиенту не уходит.

Учебный пример двух ответов на одно письмо

Вводные одного письма, учебного: заявка 184 компании «Север», клиент просит сдвинуть отгрузку, дата в листе уже стоит, новой нет, есть фраза «ждём подтверждения». Имен живых клиентов нет.

Ответ А, корявый. Три коротких предложения. Дата как в листе. Прямо сказано, что новой даты во вводных нет. Следующий шаг — подтвердить получение, без обещания срока. Читать не особенно приятно.

Ответ Б, гладкий. Абзац теплее, склад назван верно, номер 184 на месте. В середине фраза, что отгрузку перенесли на другую дату. Этой даты во вводных не было. Заканчивается предложением «мы уже согласовали перенос». Этого во вводных тоже не было.

По графам. Ответ А: факты да, лишнего нет, форма да. Ответ Б: факты нет, лишнее нет по второй графе тоже нет, форма может быть да, если длина совпала. Итог не «Б приятнее». Итог: А можно править точечно, Б в этом виде клиенту не отдают. Гладкость Б в журнал не записывают как победу.

Разбор занимает меньше, чем спор «мне больше нравится второй». Спор кончается на фразе про согласованный перенос: её некуда ткнуть в листе 184.

Кто ставит оценку: автор задачи, не модель, которая писала ответ

Оценку ставит человек, который принёс вводные и знает, что считал годным до прогона. Модель, которая писала ответ, судьёй не работает. Она уже выбрала эти фразы и охотно объяснит, почему они уместны. Объяснение не является отметкой в графе.

Не отдавайте рубрику третьей модели «для объективности». Она не открывала лист иначе как через пересказ и тоже предпочитает гладкое. На ответе Б она может поставить высшее впечатление. Впечатление в три графы не входит.

Если автор задачи и автор отправки — разные люди, графы всё равно закрывает тот, кто отвечает за вводные. Второй человек полезен на свежий взгляд, но «да» по фактам он ставит, только сверив лист, а не пересказ коллеги. Пересказ уже один раз породил гладкий абзац.

Слабый запрос как раз просит модель быть судьёй: «Сравни два ответа по заявке 184 и поставь, какой лучше, оцени профессиональность». Точный запрос судью не нанимает. Он раскладывает уже готовый черновик по трём корзинам и останавливается. Отметки да и нет пишете вы.

Не улучшай черновик и не ставь ему оценку.
Разложи черновик на три списка, ничего не добавляя:
1) числа, даты и имена — дословно из черновика;
2) утверждения, которых нет в блоке «вводные»;
3) чем форма черновика отличается от формы, которую я назову.
Если пункта нет, напиши «нет», не заполняй догадкой.
Вводные:
"""
[лист заявки]
"""
Какую форму просили:
"""
[форма]
"""
Черновик:
"""
[ответ]
"""

Список — чернила для карандаша, не печать. Если модель записала в первый список дату, которой нет даже в черновике, раскладке нельзя верить. Графы тогда заполняют глазами по листу 184.

Когда рубрика говорит переписать, а когда выбросить и сделать самому

Переписать точечно — когда одна графа «нет», а каркас годный. В ответе А форма и факты целы, споткнулись о корявую фразу. Правят фразу, графы проверяют снова. Каркас не выбрасывают.

Выбросить и сделать самому — когда «нет» стоит в первой или второй графе и правка расползается. Ответ Б не лечится заменой одного слова: из него надо вынуть срок и «уже согласовали», и гладкость, которая эти фразы держала, развалится. Быстрее написать три предложения по листу 184 самим, чем просить модель «оставить гладкость, убрать смысл».

Ещё один случай выбросить: модель второй раз приносит новое лишнее на месте вычеркнутого. Рубрика уже сказала «нет». Третий заход в том же окне часто добавляет следующее обещание. Окно закрывают. Письмо пишут от вводных, не от последнего гладкого абзаца.

«Да» по всем трём графам не значит «можно не читать». Это значит, что вкус уже не главный спор. Перед клиентом вы всё ещё читаете вслух. Рубрика не заменяет этот последний проход, она не пускает к нему текст с чужой датой.

За один вечер порядок такой.

1. Запишите три графы до прогона: факты, лишнее, форма.
2. На каждый ответ поставьте да или нет. Баллы не используйте.
3. Разберите на заявке 184 два ответа, гладкий и точный, как в учебном примере.
4. Оценку поставьте сами. Модели, которая писала текст, рубрику не отдавайте.
5. Одну дыру правьте точечно. Расползшийся ответ выбросьте и соберите заново от вводных.

Корявый ответ с тремя «да» уходит в правку. Гладкий с чужим сроком остаётся на столе. Рубрика для этого и лежит: чтобы приятное не побеждало верное.