Промпт-инженер: чем занимается на самом деле

Вакансия висит третью неделю: «Промпт-инженер, зарплата по результатам собеседования» и три строки требований: опыт общения с нейросетями, грамотная письменная речь, внимательность к деталям. По этим трём строкам совершенно не понятно, чем человек будет заниматься в первый рабочий день: писать тексты для рекламы, придумывать заголовки или отвечать за агента, который каждый день ведёт переписку с живыми клиентами. Разберём, из чего складывается вторая работа, та, где промпт написан один раз, а дальше живёт месяцами и требует присмотра.

Промпт-инженер — это специалист, который настраивает поведение ИИ-агента и отвечает за него после запуска: пишет инструкцию, собирает базу знаний, ставит барьеры и разбирает диалоги, чтобы агент отвечал по делу и не подтверждал того, чего не сделал.

Из чего на самом деле складывается работа

Текст системной инструкции — только вход в задачу. За ним идут ещё три участка, и каждый требует своих навыков и своей регулярности.

Инструкция. Роль агента, порядок вопросов, стиль ответа, условия передачи диалога человеку. Пишется блоками с заголовками, а не сплошным текстом, и правится каждый раз, когда меняется сценарий продажи или регламент компании. Разбор структуры и семь правил рабочего текста собраны в статье «Инструкция для ИИ-агента», здесь их не повторяем.

База знаний. Прайс, наличие, расписание, частые вопросы: всё, что меняется чаще, чем сама инструкция, и потому живёт отдельно от неё, в таблицах, документах или файлах быстрых ответов. Собирать её из выдуманных формулировок нельзя: источник документа должен быть реальным ответом сотрудника клиента, иначе агент рано или поздно повторит ошибку, которой в компании никогда не было.

Барьеры. Отдельная проверка перед тем, как ответ уйдёт клиенту: не назвал ли агент скидку без основания, не подтвердил ли действие, которое на самом деле не выполнил. Барьеры устроены иначе, чем редактура текста, и разбираем их в следующем разделе.

Разбор диалогов. Теги, оценки, отчёты, стоимость ответа. Здесь промпт-инженер перестаёт писать и начинает читать: что агент делал вчера, где клиенты застревали, какая правка подорожала диалог вдвое.

Как выглядит рабочий день человека, который ведёт агента клиента

Один агент редко требует внимания каждый час. Реальный ритм — несколько коротких заходов в день плюс один длинный в конце недели, и именно этот ритм отличает работу с чужим агентом от разового написания промпта для себя.

Ни один из этих четырёх заходов не похож на «сесть и написать промпт». Собственно написание текста случается редко, не каждую неделю. Основной объём времени уходит на то, чтобы заметить симптом раньше клиента.

Где в этой работе редактура, а где аналитика

Задачи промпт-инженера делятся на две разные по духу группы, и путать их — частая ошибка новичка: пытаться вычитать текст там, где нужно смотреть в цифры, и наоборот.

Редактура заметна и приятна: переписал абзац, сразу видно результат в тестовом чате. Аналитика скучнее и важнее: она одна показывает, работает ли правка на живом потоке обращений, а не только в разговоре с самим собой. Какие цифры смотреть в первую очередь и что выгружается в отчётах, описано в статье «Аналитика диалогов».

Зачем нужны барьеры, если инструкция уже написана

Инструкция описывает, как агент должен вести себя в норме. Барьер — отдельная проверка, которая ловит момент, когда норма нарушена, и это два разных механизма, а не дублирование одного и того же правила.

Платформа устроена так: перед отправкой ответа можно поставить условие на естественном языке, псевдокод вида «если агент собирается назвать скидку, которой нет в базе знаний». Если условие срабатывает, ответ либо перегенерируется, либо заменяется заранее заданной фразой, а следующим шагом можно назначить остановку диалога или вызов менеджера. Отдельно работает контроль фактов: обычный режим сверяет ключевые утверждения с базой знаний, строгий требует подтверждения для любого факта в ответе. Третий вид, контроль действий, устроен проще всего по формулировке и опаснее всего по последствиям: он ловит момент, когда агент написал клиенту «записала вас», хотя сама функция записи не вызывалась.

Проверка барьера — это тоже обращение к модели, а значит, тоже расход токенов по обычному тарифу платформы. Разовое срабатывание не заметно на счёте, но барьер, который включается на каждом втором сообщении, стоит смотреть отдельной строкой в стоимости диалога: частое срабатывание почти всегда означает, что дешевле поправить инструкцию, чем постоянно платить за перегенерацию ответа. Полный список настроек контроля поведения смотрите в руководстве Савви.

Как проверяют, что агент действительно делает то, что нужно

Текст ответа — это то, что видит клиент, а не то, что показывает, отработал ли агент правильно. Проверка правды лежит в трёх разных местах, и держать в голове только одно из них означает повторять один и тот же спор на планёрках раз за разом.

Продвинутый режим журнала диалогов показывает блок вызова функции между репликами: название, аргументы, результат. Если блока нет там, где он ожидался, агент составил ответ сам, не обращаясь к системе, и обещание в тексте ничем не подкреплено. Теги, расставленные условиями по срабатыванию файлов базы знаний, превращают разбор диалогов из «прочитать всё подряд» в «посмотреть, о чём была четверть обращений за месяц». Оценки от клиентов (лайк, дизлайк или звёзды) появляются только там, где настроен запрос оценки, и без этой настройки вкладка так и останется пустой.

Отчёты за период выгружаются в Excel двумя способами: строка на диалог со стоимостью и тегами (когда нужна общая картина) и строка на реплику с вызовами функций и деталями ошибок (когда нужно разобрать конкретный сбой, а не тенденцию). Сравнение с ручной работой оператора здесь условное: менеджер обходится компании примерно в 40 000 ₽ в месяц при около 450 обращениях, то есть около 89 ₽ за обращение по средним ставкам, и это оценка для масштаба, а не тариф платформы.

Что из этого можно сделать уже на своём агенте

Вычтите из списка выше то, что у вас уже покрыто: если аудит инструкции никто не запускал полгода, если барьер стоит только на скидках, а контроля действий нет вовсе, если теги не расставлены и половина диалогов в отчёте помечена как «без тегов», вот и три конкретных задачи на эту неделю, без найма отдельного человека под них.

Дальше решение зависит от масштаба: одному агенту хватает одного человека на несколько часов в неделю, а если агентов несколько и у каждого свой клиент, эта же работа умножается на количество клиентов и превращается в отдельный процесс. Как это устроено у подрядчика, который ведёт чужих агентов на потоке, показывает статья «ИИ-агент как услуга интегратора».

Частые вопросы