Контроль качества звонков: как и когда обновлять критерии оценки

Контроль качества звонков теряет смысл, если менеджер следует новому скрипту, а оценку получает по старому. Например, компания изменила условия скидки, но контролёр по-прежнему проверяет прежнюю формулировку. Балл падает не из-за ошибки сотрудника, а из-за устаревшего регламента.

Критерии стоит пересматривать после существенных изменений в продукте, цене, акции или порядке разговора. Не каждое уточнение требует новой системы баллов. Сначала руководитель проверяет, изменилось ли ожидаемое поведение менеджера и можно ли по-прежнему оценить его по записи звонка.

Старые правила при этом не удаляют. Версия критериев, дата её действия и примеры звонков помогают объяснить прежние оценки. Они же нужны для сравнения периодов: рост среднего балла после обновления ещё не доказывает, что команда стала работать лучше.

Почему критерии оценки звонков устаревают

Критерии устаревают, когда процесс продаж меняется быстрее, чем регламент оценки. Продуктовая команда может убрать тариф, маркетинг — запустить акцию, а РОП — сократить скрипт. Если эти решения не попали в чек-лист, контролёр оценивает разговор по правилам, которые уже не действуют.

Разрыв заметен в спорных баллах. Менеджер задаёт новый обязательный вопрос, но теряет балл за отсутствие старого. Контролёр тоже действует добросовестно: он опирается на утверждённый документ. Проблема не решится дополнительным обучением сотрудника, пока команда не обновит критерий.

Устаревшая система оценки звонков мешает и руководителю. Отчёт показывает нарушения, которых больше нет в процессе, а реальные ошибки в новом предложении остаются незамеченными. Поэтому актуальность регламента проверяют не только по датам, но и по тому, совпадает ли он с действующей практикой.

Какие изменения требуют пересмотра критериев

Пересмотр нужен, если изменение влияет на то, что менеджер должен сказать или сделать в разговоре. Новый продукт может потребовать иных вопросов о потребности клиента. Изменение условий поставки или возврата тоже стоит отразить в оценке, если сотрудник обязан объяснять их до оформления сделки.

Цены, скидки и акции особенно быстро делают формулировки неактуальными. Критерий про фиксированную скидку нельзя без проверки переносить на акцию с разными условиями. Важно оценивать не само упоминание выгоды, а правильность условий и то, не пообещал ли менеджер клиенту лишнего.

Изменение скрипта влияет на наблюдаемое поведение. Допустим, раньше менеджер называл тариф сразу, а теперь сначала уточняет объём заказа. Старый пункт «озвучил тариф в начале» заменяют проверкой вопроса об объёме и корректного предложения после ответа клиента.

Новая аудитория тоже меняет содержание разговора. При работе с компаниями вместо частных клиентов могут понадобиться вопросы о сроках закупки и участниках решения. Если команда изменила правила работы с возражениями, контролёр должен знать, какое действие теперь считается достаточным.

Как понять, что пора менять регламент

Повод для проверки — повторяющиеся споры об одном пункте, а не любая низкая оценка. Руководитель собирает несколько записей, причины разногласий и действующий текст критерия. Если спор возникает из-за одного нового правила продаж, нужно проверить сам регламент, а не только работу менеджеров.

Ещё один сигнал — рост исключений. Например, контролёры всё чаще вручную снимают пункт про старую акцию с оценки. Полезно сравнить, в каких случаях они делают исключение и одинаково ли его объясняют. Повторяющееся исключение может означать, что правило пора переписать.

Расхождения между руководителями можно изучить на общей выборке. Два оценщика независимо слушают одни звонки и ставят баллы по одному правилу. Затем они обсуждают различия и примеры. Каппа учитывает случайное совпадение оценок, но требует корректного расчёта и не заменяет разбор причин спора.

Разовую ошибку сотрудника важно отделить от системного изменения. Если менеджер пропустил действующий обязательный вопрос, достаточно обратной связи и повторной проверки. Если новый скрипт убрал этот вопрос для всей команды, снижение балла говорит уже о проблеме критерия.

Что пересматривать в критериях

В первую очередь пересматривают формулировку и наблюдаемое действие. «Менеджер был убедительным» оставляет слишком много места для личного мнения. Проверяемый вариант звучит иначе: «Менеджер уточнил причину сомнения и объяснил условие предложения, связанное с ней».

Затем проверяют вес баллов. Ошибка в цене может сильнее влиять на решение клиента, чем пропущенное необязательное приветствие. Вес стоит привязать к риску для сделки и клиента, а не к удобству подсчёта. Если веса меняются, общий балл до и после пересмотра уже нельзя читать одинаково.

Отдельно определяют обязательность пункта и исключения. Вопрос о сроке закупки уместен не в каждом сервисном звонке. Для неподходящего сценария лучше предусмотреть отметку «не применимо», чем автоматически ставить ноль. Регламент должен объяснять, входит ли такой пункт в знаменатель итоговой оценки.

К каждому спорному правилу полезно добавить примеры: зачтённое действие, ошибку и допустимое исключение. Например, клиент сам назвал объём заказа до вопроса менеджера. Если правило требует получить информацию, а не произнести точную фразу, такой разговор можно зачесть.

Как обновить регламент: порядок действий

Обновление начинают с фиксации самого изменения. Ответственный записывает, что именно изменилось, когда новое правило начинает действовать и кого оно касается. Источником может быть утверждённое описание продукта, приказ о цене или новая редакция скрипта. Неясные условия сначала согласуют с владельцем процесса.

Далее находят затронутые критерии и описывают новое поведение простыми словами. Допустим, акция теперь действует только при заказе от десяти единиц. Менеджер должен назвать порог и срок действия. Сравнение версий показывает, какие части оценки следует изменить, а какие можно оставить без пересмотра.

Для проверки берут реальные звонки подходящего типа, включая пограничные случаи. В одном менеджер говорит: «Скидка действует до конца месяца при заказе от десяти единиц». Если он также назвал её размер верно, балл можно зачесть. Упоминания скидки без порога для нового правила уже недостаточно.

Несколько оценщиков независимо применяют проект критерия к одной выборке. Затем команда разбирает расхождения и уточняет текст. Если запись не позволяет понять срок акции, правило должно подсказать решение: не домысливать ответ, а оценивать только то, что прозвучало в разговоре.

После проверки владелец регламента утверждает версию и дату перехода. Команде сообщают, что изменилось, где найти примеры и к кому обратиться при споре. На первых оценках полезно собрать обратную связь менеджеров и контролёров, не меняя утверждённые правила задним числом.

Как вести версии и историю изменений

Каждой версии регламента нужны номер и дата вступления в силу. В истории изменений также записывают причину пересмотра, затронутые критерии и ответственного. Рядом сохраняют ссылку на утверждённый текст и примеры звонков, на которых команда проверяла новое правило.

Полезно различать дату звонка, дату оценки и дату утверждения версии. Обычно к разговору применяют правила, действовавшие в день звонка, даже если контролёр слушает запись позже. Если компания выбирает иной порядок, его заранее фиксируют и объясняют сотрудникам.

История изменений должна показывать не только новый текст, но и смысл правки. Запись «обновлён пункт об акции» мало помогает при споре. Лучше указать, что добавили проверку минимального объёма заказа, изменили правило балла и исключили звонки вне периода акции.

Оценки разных версий нельзя без оговорок складывать в единый средний балл. Пункты, веса и исключения могли измениться, поэтому одинаковые проценты не всегда означают одинаковое качество. В отчёте сохраняют привязку каждой оценки к версии и отмечают дату перехода.

Как сравнивать периоды до и после обновления

Для сравнения выбирают похожие периоды и отдельно смотрят сопоставимые типы звонков. Продажи новым клиентам не стоит смешивать с продлением договоров, если у них разные сценарии. Также проверяют размер выборок, состав менеджеров, продукт и долю обращений по действующим акциям.

Размер выборки влияет на неопределённость вывода. Разница в несколько баллов на десяти звонках может не повториться на другой десятке. Доверительный интервал помогает показать разброс оценки при подходящем методе расчёта. Для сложных выборок и зависимых звонков лучше привлечь аналитика.

Чтобы отделить эффект нового регламента, можно повторно оценить общую выборку по обеим версиям. Сначала сравнивают баллы одних и тех же разговоров, затем смотрят результаты по неизменным критериям. Такой подход показывает влияние правил, но сам по себе не устраняет сезонность или смену состава команды.

Ошибки при пересмотре критериев

Первая ошибка — менять весь регламент из-за одного нового условия. Тогда команда не поймёт, какая правка повлияла на итоговый балл. Лучше сначала найти пункты, связанные с изменением, и сохранить остальные. Полный пересмотр оправдан, когда сам процесс продаж существенно изменился.

Вторая ошибка — утверждать критерий без проверки на звонках. Даже понятная формулировка может не работать, когда клиент сам сообщает нужную информацию или прерывает разговор. Выборка с обычными и пограничными случаями помогает заранее описать исключения и уменьшить число споров.

Третья ошибка — не сообщить команде дату перехода. Тогда два контролёра могут оценить соседние звонки по разным правилам, а менеджер не поймёт причину снижения балла. Нужны единое сообщение, ссылка на версию и короткий разбор того, какие действия теперь проверяют иначе.

Четвёртая ошибка — показать результаты разных версий одной непрерывной линией без пояснения. Рост после удаления сложного пункта легко принять за улучшение работы. На графике стоит отметить переход, а рядом показать неизменные критерии и результаты повторной оценки общей выборки.

Как помогает речевая аналитика

Речевая аналитика для контроля качества звонков помогает искать разговоры по словам и темам, связанным с изменением. Например, команда собирает звонки с упоминанием акции и слушает случаи, где менеджер обсуждал порог заказа. Это ускоряет подбор записей для проверки нового критерия.

После изменения скрипта анализ разговоров помогает найти случаи, где менеджеры обсуждают новый этап или условия предложения. Результаты поиска нужно сверять с записью и контекстом. Отсутствие точной фразы не всегда означает ошибку: клиент мог назвать информацию первым, а менеджер — подтвердить её.

Речевая аналитика OrbitAI относится к контролю звонков и чатов. При выборе способа анализа стоит отдельно уточнить доступные настройки критериев, разрезы отчётов и порядок хранения версий. Решение о пересмотре регламента всё равно принимает команда, которая знает условия продукта и правила продаж.

Как задать периодичность пересмотра

Периодичность зависит от того, как часто меняются предложения и насколько опасны ошибки в разговоре. Команде с частыми акциями нужен более частый просмотр затронутых пунктов, чем отделу со стабильным продуктом. Ритм проверки стоит закрепить за конкретным владельцем регламента.

Регулярная проверка не отменяет внеплановую. Новая цена, обязательная формулировка или условие акции должны запускать проверку сразу после утверждения изменения, до оценки звонков по новым правилам. При этом небольшая редакционная правка без изменения смысла не требует менять веса.

Объём звонков тоже влияет на срок проверки. При небольшом потоке может понадобиться больше времени, чтобы собрать разные сценарии для проверки критерия. При большом потоке повторяющиеся споры заметны быстрее, но и число неверных оценок растёт быстрее. Поэтому риск ошибки важнее календаря.