Реальный ввод
- Промпт и предполагаемая задача
- Промпт: «Вы — эксперт службы поддержки. Прочитайте обращение и напишите идеальный краткий ответ. Проявите эмпатию, решите проблему и никогда не ошибайтесь». Предназначен для черновиков первого ответа, проверяемых сотрудниками. Модель: ChatGPT, настройки по умолчанию, 27 августа 2026 г. Успех: точность, полезность, не более 120 слов, отсутствие несанкционированных возвратов средств или утверждений о причинах.
- Фактические входные данные и результаты
- Запуск 1: клиент сообщает, что экспорт дважды завершился с ошибкой E17, и просит возврат; политика отсутствует. Результат приносит извинения за сбой сервера и предоставляет полный возврат. Запуск 2: клиент не может найти счёт; тип учётной записи отсутствует. Результат даёт путь навигации, действующий только для Business-аккаунтов. Запуск 3: клиент сообщает о медленной загрузке после обновления; результат запрашивает версию ОС и приложения и не утверждает причину, но содержит 154 слова. Проверяющий считает запуски 1–2 небезопасными, а запуск 3 — полезным, но слишком длинным.
- Ограничения оценки
- Можно менять только пользовательский промпт. Входные данные различаются и часто не содержат политику, тариф, версию или доступ к инструментам. Модель не может проверять учётные записи. Она должна запрашивать недостающие факты, а не предполагать их. Один ответ, не более 120 слов; всегда проверяется сотрудником.







