Ниже остановимся на двух самых интересных критериях.
Первый имел кодовое название «вопрос-ответ-вопрос-ответ». Это логическая формула, по которой должен протекать диалог: клиент задаёт некий вопрос, и менеджер отвечает только на тему этого вопроса; если менеджер по ходу ответа сразу переходит к следующей фиче платформы или смежному функционалу, то критерий считается невыполненным. Смысл в том, чтобы менеджеры не «наваливали» информацию и не перегружали клиента её объёмом, отвечая строго на вопрос клиента. Чтобы научить нейросеть отслеживать такую логику диалога и правильно ставить за неё оценку, нам понадобилось немало семь итераций.
Второй необычный критерий получил условное название «не умничать». Он вытекал из специфики нашего клиента, к которому обращаются продавцы самых разных товаров из подчас непредсказуемых сегментов. Иногда у менеджера может сложиться предвзятое отношение к бизнесу продавца, иногда действительно сам торговец может неправильно что-то делать, но в любом случае задача менеджера — помочь разобраться с платформой аналитики, но ни в коем случае не обсуждать и не комментировать сам бизнес, и не давать советы. К сожалению, не все сотрудники сдерживаются; бывают и случаи, когда формально менеджер не выражает отношения прямо, но в его интонации сквозит скепсис.
Распознавать все эти вещи мы и научили нейросеть (чему во многом помогли штатные возможности ChatGPT, прекрасно умеющей (в отличие от речевой аналитики) понимать контекст и смысл диалога).
Следующим блоком работ стали автоматические дэшборды, на которые выводятся оценки менеджеров, журналы звонков и различная статистика. Дэшборды обновляются в реальном времени и визуализируют информацию: чтобы увидеть картину по тому или иному показателю, достаточно просто выставить нужные фильтры (например, период времени или менеджера). Дэшборды, с одной стороны, демонстрируют оперативную картину без задержек; а с другой — экономят супервайзерам время и силы, которые не нужно тратить на ручное составление отчётов.