Статья 5.6.2
Сценарии поведенческого тестирования
Как задать ход испытания — Для текстового агента составить одиночный запрос, затем диалог по заданным репликам. Для сценария с имитацией клиента указать его цель и факты, например количество и город, которые он сообщает только в ответ на подходящий вопрос.
Как подготовить ответы инструментов — Для функции проверки остатка задать учебные ответы «достаточно», «недостаточно» и ошибку сервиса. Показать, как проверить каждый вариант в изолированном испытании. Отсутствие подходящего тестового ответа требует правки сценария.
Как сформулировать критерии успеха — Проверить по тексту, что агент уточнил город и сохранил количество. По зафиксированным вызовам проверить аргументы запроса остатка и отсутствие попытки бронирования без согласия. Для вывода об отсутствии действия нужны полные результаты испытания.