← На главную

Окно наблюдения

Как окно наблюдения меняет вывод.

Один и тот же эксперимент может быть 'плюсом' и 'минусом' — в зависимости от того, какое окно вы смотрите.

В реальности эффект часто не постоянный: есть разгон, компенсация, усталость, лаг. Поэтому вывод из окна 7 дней и окна 28 дней может быть разным.

Если вы не фиксируете окно — вы не фиксируете вывод.

14
14

Смена окна меняет знак среднего эффекта.

Почему окна дают разные ответы

Есть разгон и адаптация.

Есть лаги и компенсации.

Есть усталость и насыщение.

Поэтому 'эффект' — это функция времени.

В A/B фиксируйте окно так же жёстко, как метрику.

Окно — это часть методологии. Если окна плавают, то плавает и вывод.

В монетизации лучше заранее определить: короткое окно для ранних сигналов и длинное окно для устойчивого итога.

Окно — это линза. Меняете линзу — меняете вывод.

← Назад ко времени