CRM-аналитика
Выбор канала по предпочтению клиента: как проверить пользу настройки
Время чтения: 5 мин
Уровень материала: Для экспертов
Содержание
В центре предпочтений появился вопрос «Где вам удобнее получать предложения?». Через месяц выбравшие мессенджер покупают чаще остальных. Команда делает вывод, что новая настройка увеличила продажи. Но, возможно, её заполнили самые заинтересованные клиенты, которые и раньше покупали чаще.
Заявленное предпочтение — информация, которую человек сообщил сам. Она может помочь выбрать удобный способ общения, но сам факт её наличия не доказывает финансовую пользу. Чтобы проверить результат, нужно разделить эффект сбора предпочтения и эффект использования полученного ответа.
Уточните смысл настройки
«Предпочитаю email» и «Пишите мне только по email» — разные обещания. В первом случае могут сохраняться другие разрешённые варианты при ясно объяснённых условиях. Во втором выбор ограничивает допустимые каналы.
Эксперимент не должен нарушать запреты ради чистоты сравнения. Если человек исключил SMS, нельзя случайно назначить ему SMS-контроль. При отсутствии нескольких допустимых вариантов вопрос теста придётся изменить: например, оценить интерфейс выбора или содержание в разрешённом канале.
Разделите два эксперимента
Первый вопрос: полезно ли предлагать людям указать предпочтение? Для него доступную аудиторию распределяют между текущим и новым способом предложения настроек. Во всех вариантах сохраняются существующие права, ограничения и простой отказ от рекламы.
Второй вопрос: полезно ли учитывать уже известное мягкое предпочтение при выборе среди разрешённых каналов? Здесь подходят участники с доступными вариантами, для которых обе сравниваемые политики соответствуют обещанию. Их распределяют между заранее определёнными правилами выбора.
Случайное назначение вариантов — основа рандомизированного дизайна, позволяющая сравнивать политики без целенаправленного отбора более склонных к покупке людей в один вариант. При этом результат для ответивших на вопрос нельзя автоматически переносить на тех, кто не ответил.
| Что хотим узнать | Кого распределяем | Какой вывод получаем |
|---|---|---|
| Стоит ли предлагать настройку? | Всех подходящих для предложения | Эффект всей политики предложения |
| Полезно ли использовать ответ? | Подходящих участников с известным ответом | Эффект использования в этой группе |
| Работает ли новый интерфейс? | Подходящих пользователей интерфейса | Эффект изменения формы и её применения |
Сохраните аудиторию после назначения
Часть людей не заполнит форму, часть изменит выбор, часть откажется от сообщений. В тесте предложения настройки их нельзя просто удалить из анализа: это часть результата политики.
Принцип анализа по исходному назначению означает, что клиент остаётся в своей группе независимо от последующего поведения. При этом его актуальное решение немедленно учитывается в реальных отправках. Соблюдение предпочтения и сохранение группы анализа не противоречат друг другу.
Для дополнительного описания можно показать долю ответивших и доступность каналов. Но сравнение покупателей среди ответивших в одном варианте со всей базой в другом уже отвечает на другой, некорректно поставленный вопрос.
Условный пример: ответили только самые вовлечённые
В учебной ситуации новую форму показали 6 тысячам клиентов, из них 900 выбрали канал. Ещё 6 тысяч находятся в контрольной группе с текущим процессом. Среди 900 ответивших покупки заметно чаще, чем среди всех остальных.
Для основного вывода сравнивают финансовый результат всех 6 тысяч участников теста со всеми 6 тысячами контроля за одинаковый срок. В него входят стоимость каналов, предусмотренные переменные расходы и расходы политики, если они различаются. Отдельный результат 900 человек описывает выбранную подгруппу, но не доказывает эффект формы.
Это пример устройства анализа без численного обещания роста. Даже если ответы полезны для сервиса, их сбор может не дать измеримого финансового эффекта в коротком окне.
Согласуйте экономику и опыт клиента
Основную метрику выбирают по решению: например, финансовый результат на назначенного клиента. Дополнительно контролируют нарушения предпочтений, жалобы, отписки, неудачные доставки и нагрузку на поддержку.
Не оптимизируйте только стоимость контакта. Более дешёвый канал может быть удобнее или хуже для конкретной задачи. И наоборот, дорогой выбор не обязательно окупится. Экономику рассчитывают по фактическим отправкам, а эффект — по всем назначенным участникам.
Если цель — сохранить результат при меньшем числе сообщений, нужен заранее сформулированный критерий допустимого ухудшения. Отсутствие статистически значимой разницы не доказывает равенство вариантов.
Обновляйте предпочтение без скрытой подмены
Запишите дату, источник и точную формулировку вопроса. Позже клиенту должна быть доступна понятная смена решения. Модель, основанная на кликах, может предложить другой канал, но не должна молча отменять явно выраженное ограничение.
При недоступности выбранного канала предусмотрите заранее объяснённый вариант: отложить сообщение, использовать другой разрешённый способ или попросить обновить настройку. Самый высокий прогноз покупки не является основанием проигнорировать запрет.
Результат такой проверки — ответ на конкретный вопрос о политике общения. Это помогает использовать предпочтения как рабочее обещание клиенту и проверяемый инструмент, сохраняя различие между добровольным ответом и доказанным эффектом маркетинга.
Источники
NIST/SEMATECH. Completely randomized designs. e-Handbook of Statistical Methods, раздел 5.3.3.1. Проверено 22.09.2026.