Медиа imot.io
Метод

Эмоции в звонках: что видно по тексту разговора, а что только по голосу

Анализ эмоций в звонках обычно заказывают ради двух задач: найти недовольных клиентов и сотрудников, которые с ними плохо разговаривают. Системы оценивают эмоцию по голосу — интонации, громкости, темпу — или окраску слов в расшифровке. Решение руководитель принимает по тому, что произошло в разговоре: клиент пожаловался, попросил позвать руководителя, пригрозил отменить запись, сотрудник не ответил на вопрос. Всё это видно в тексте разговора.

Коротко

  • По голосу модели оценивают интонацию, громкость и темп и относят говорящего к одному из нескольких классов эмоций.
  • По тексту оценивают окраску слов и фраз: позитивную, негативную или нейтральную.
  • Для контроля качества нужны события в тексте: жалоба, угроза уйти, просьба позвать руководителя, повторный вопрос.
  • Каждое событие можно посчитать на всём потоке и отправить ответственному оповещением.

Как работает анализ эмоций в звонках

Анализ эмоций клиента по голосу опирается на акустику: модель оценивает интонацию, громкость и темп речи и относит говорящего к одному из нескольких классов, например «гнев», «радость», «нейтрально». Обучают такие модели на размеченных записях, и у подхода есть известные ограничения. В докладе Университета ИТМО о сервисе для анализа деловых телефонных разговоров отмечено, что эмоции в спонтанной речи распознаются труднее, чем в речи человека на сцене, а сильные эмоции вроде гнева в деловом разговоре маловероятны. Чем больше классов эмоций различает модель, тем ниже качество. На телефонной монозаписи добавляется вопрос, чья это эмоция: голоса сотрудника и клиента сведены в один канал, подробнее — в статье «Стерео или моно».
Сентимент-анализ звонков работает с расшифровкой. Тональность звонка — это окраска слов и фраз, которую модель относит к позитивной, негативной или нейтральной речи; её считают по отдельным репликам и по разговору целиком.
Оценка эмоции показывает, каким был разговор. Чтобы назначить действие, руководителю нужно ещё знать, что в нём произошло. Распространённый тезис о том, что слова передают лишь 7% смысла, к деловым разговорам не относится — это разобрано в статье о формуле Мерабяна.

Что видно по тексту разговора

Недовольство в звонке обычно звучит как конкретное событие, и его видно в расшифровке:
  • жалоба и её предмет;
  • просьба позвать руководителя;
  • угроза отменить запись, расторгнуть договор, уйти к другим или написать отзыв;
  • упоминание юриста или суда;
  • вопрос, который клиент задаёт повторно, потому что не получил ответа;
  • «я подумаю» без следующего шага;
  • мат и оскорбления;
  • дежурное «я вас понимаю» без решения проблемы.
Почему фраза «я вас понимаю» без решения только разгоняет конфликт, разобрано в отдельной статье, а что стоит за ответом «я подумаю» — в разборе этой паузы.
Каждое событие описывают словарём или GPT-правилом, которое пишется обычным языком и размечает разговор по смыслу. Тег встаёт рядом с фразой, где событие произошло, отчёт показывает долю таких звонков по сотрудникам и линиям, а ответственный получает оповещение в Telegram, MAX, на почту или в Битрикс24 через несколько минут после разговора. Как событие превращается в тег или пункт чек-листа, показано в статье «Чем тег отличается от чек-листа»; как устроены словари и GPT-правила — в обзоре технологий речевой аналитики.
Предмет недовольства важнее его силы. В исследовании «О чём звонят в клинику» явное недовольство прозвучало в 5,8% обращений в клиники, и из 42 таких разговоров лечения касались 2: остальные были про обещанное и несделанное, недозвон, сроки и деньги. В пилоте клиники эстетической медицины нашли обращение адвоката об ожогах после процедуры и звонок о сильной аллергии; такие звонки можно отбирать оповещением по словам «ожог», «аллергия», «адвокат», и угадывать их по голосу не нужно. Кому какие оповещения отправлять, разобрано в задачах речевой аналитики, в сценарии о жалобах.

Тон и событие: что даёт каждое для контроля качества

Оценка эмоции и событие в тексте отвечают на разные вопросы и дополняют друг друга. Чтобы найти недовольных клиентов, оценка эмоции даст звонки с негативной окраской, а событие — жалобу с её предметом. Чтобы понять причину недовольства, нужен предмет жалобы и исход звонка, а их показывает только текст.
Imot.io работает с текстом расшифровки: недовольство ищут по событиям в разговоре, считают их на всём потоке и через несколько минут после звонка оповещают ответственного со ссылкой на запись. Начинать стоит с 3–5 событий, по которым у компании уже есть решение, что делать: перезвонить в течение часа, передать жалобу старшему администратору, разобрать звонок с сотрудником. Остальные события подключают, когда первые начнут приводить к действиям.

Частые вопросы

Что такое тональность звонка?
Окраска слов и фраз разговора: позитивная, негативная или нейтральная. Её оценивают по расшифровке — по отдельным репликам и по разговору целиком.
Можно ли определить эмоции клиента по голосу?
Такие модели есть: они оценивают интонацию, громкость и темп и относят говорящего к одному из классов эмоций. Эмоции в спонтанной деловой речи им распознавать труднее, чем в постановочной, а на монозаписи сложно понять, чья это эмоция.
Какие фразы говорят о недовольстве клиента?
Жалоба с конкретным предметом, просьба позвать руководителя, угроза отменить запись или уйти к другим, упоминание юриста и повторный вопрос, на который клиент не получил ответа.
Как настроить оповещение о жалобе или угрозе уйти?
Событие описывают словарём или GPT-правилом, проверяют на своих звонках и выбирают получателя и канал: Telegram, MAX, почту или Битрикс24. Оповещение приходит через несколько минут после разговора со ссылкой на звонок.
Чем поиск жалоб отличается от анализа эмоций?
Анализ эмоций показывает, каким был разговор. Поиск жалоб показывает, что в нём произошло: предмет недовольства, ответ сотрудника и исход звонка, а по ним назначают действие: перезвонить, передать жалобу старшему, разобрать звонок с сотрудником.