Что такое окно наблюдения

Окно наблюдения — это интервал, в течение которого учитывают события для конкретного расчёта.

Например, «покупки за первые 14 суток после включения клиента в эксперимент».

В определении нужны точка начала, длительность и список учитываемых событий. Формулировки «покупки после рассылки» недостаточно: они могут произойти и через час, и через полгода.

Как задать окно

Условный пример. Магазин проверяет напоминание о повторном заказе.

Каждого подходящего клиента случайно относят к тесту или контролю. С этого момента для него начинается окно в 14 суток. В тесте отправляют сообщение, в контроле — нет.

Покупки обеих групп учитывают за одинаковый срок от распределения. Контролю не нужна фактическая отправка письма, чтобы появилась сопоставимая точка отсчёта.

Почему нельзя закрывать расчёт слишком рано

Если участники входят в эксперимент в разные дни, их окна завершаются в разное время.

При двухнедельном наборе и четырнадцатидневном окне финальный результат появится только после того, как завершится наблюдение за последними участниками.

Иначе первые клиенты получат полные две недели для покупки, а последние — всего несколько дней.

Как выбрать длительность

Учитывайте время принятия решения, цикл покупки и задачу кампании.

Короткое окно помогает быстрее получить результат, но может пропустить поздний отклик. Длинное захватывает больше последствий, включая возвраты или перенос покупок во времени.

Основное окно стоит определить до просмотра результатов. Выбирать после теста тот срок, на котором эффект выглядит лучше, — ненадёжный подход.

Чем оно отличается от окна атрибуции

Окно атрибуции задаёт, в какой срок после контакта система может приписать ему покупку.

Окно наблюдения определяет, какие события входят в анализ. В эксперименте это могут быть все покупки участников, независимо от перехода по письму.

Поэтому «покупка попала в окно атрибуции» не означает «покупку вызвала коммуникация».

Горизонт расчёта — близкое понятие: он обозначает срок оценки результата. Окно наблюдения конкретизирует временные границы данных, используемых для этой оценки.