Почему CSAT растёт, а жалоб становится больше

В отчёте удовлетворённость выросла с 75% до 84%, а поддержка говорит, что жалоб стало вдвое больше. На совещании спорят, какой источник ошибается. Между тем оба числа могут быть верными: они описывают разные совокупности и разные события.

CSAT — показатель удовлетворённости по ответам на конкретный вопрос. Например, доля оценок 4 и 5 среди всех ответов по пятибалльной шкале. Он характеризует ответивших в заданной ситуации. Жалобы фиксируют обращения, которые могут поступать от другой части клиентов и относиться к другим этапам обслуживания.

Сначала приведите показатели к понятной базе

Зафиксируйте формулировку вопроса, момент приглашения, канал, шкалу и правило расчёта. «Оцените работу оператора» и «Оцените решение проблемы» — не одно и то же. Рост первого показателя совместим с нерешённой проблемой заказа.

Для жалоб определите единицу: сообщения, обращения, уникальные проблемы или клиенты. Один человек может написать в чат, на почту и в социальную сеть. Если считать сообщения, вы измеряете и повторные попытки получить помощь.

AAPOR рекомендует сохранять сопоставимыми формулировку и метод опроса при измерении изменений во времени. Изменение процедуры само способно повлиять на результат.

Как состав ответов улучшает среднюю оценку

Условный пример. В первом месяце опросили пользователей двух каналов. Среди ответов в приложении доля довольных — 90%, в обращениях после доставки — 60%.

Внутри обоих каналов ничего не улучшилось. Поменялась доля ответов из каждого канала. Общий показатель вырос, потому что среди ответивших стало больше участников с высокой оценкой.

Для диагностики рассчитайте результат при фиксированных весах каналов. При соотношении 50/50 он останется 75%. Это помогает обнаружить влияние состава, но не доказывает, что ответившие представляют всех клиентов внутри каналов.

Почему жалоб могло стать больше

Если число жалоб увеличилось с 30 до 60 одновременно с ростом заказов с 10 000 до 20 000, частота осталась прежней: 3 на 1 000 заказов. Это иной вывод, чем «качество ухудшилось вдвое».

Но и стабильная частота не означает отсутствия проблемы. Она может скрыть рост серьёзных случаев на фоне снижения мелких. Разделите жалобы по причине, тяжести, региону и типу заказа. При этом слишком мелкие группы дают нестабильные оценки — показывайте их размер.

Жалоб также становится больше, когда компания делает обращение удобнее. Это улучшение доступности обратной связи может временно выглядеть как ухудшение сервиса.

Порядок проверки расхождения

CRM Lab предлагает последовательно проверить четыре слоя.

• Сбор: кому полагалось приглашение, кому его отправили, кто смог ответить.
• Состав: какие клиенты, каналы и типы проблем представлены в ответах.
• Расчёт: одинаковы ли шкала, знаменатель, дедупликация и период.
• Опыт: изменились ли сроки, ошибки, возвраты и повторные обращения.

Особое внимание — исключениям. Если опрос перестал уходить клиентам с незакрытым обращением, CSAT может вырасти именно потому, что проблемные случаи исчезли из измерения. Их нельзя молча считать довольными или удалять из отчёта об охвате.

Как показывать результат руководству

Рядом с CSAT разместите число ответов, долю приглашённых среди подходящих клиентов и долю ответивших среди приглашённых. Отдельно — частоту жалоб, причины и повторные обращения по той же проблеме.

Разложите изменение на доступные объяснения: состав ответов, изменение внутри сопоставимых групп и неизвестная часть. Не называйте рост CSAT улучшением всего клиентского опыта, пока не проверена сопоставимость. Полезный отчёт делает противоречие исследуемым и показывает, какое действие требуется бизнесу.

Источники

American Association for Public Opinion Research (AAPOR). Best Practices for Survey Research. AAPOR. Проверено 22.09.2026.