Практика

Модуль 5. Сегменты и неоднородность

Новая программа тренировок: новички vs. опытные
Фитнес-приложение. A/B-тест новой программы тренировок. Средний engagement +8%. При разбивке по сегментам — картина другая.
Сегмент
Engagement
Доля
Доля выручки
Новички
+25%
55%
30%
Опытные
−5%
45%
70%
Агрегат
+8%
100%
100%
Что говорит агрегат
Средний engagement +8%. Формально — успех. Но агрегат = 55% × (+25%) + 45% × (−5%) = +13.75% − 2.25% ≈ +8%. Число «+8%» — не реальность ни одного из двух сегментов.
Для кого эффект
Новички выигрывают, опытные проигрывают
Новая программа проще — новичкам проще начать. Но опытным она кажется примитивной, engagement падает. Опытные генерируют 70% выручки. Средний +8% маскирует деградацию ядра.
Ключевое: решение «для всех» убыточно для основного сегмента
Вопросы для разбора
  1. Что произойдёт с revenue, если катить для всех? (подсказка: 70% выручки — опытные)
  2. Можно ли катить только новичкам? Какие риски?
  3. Что если доля новичков изменится (сезонность, маркетинг)?
  4. Какой агрегат мы увидим, если доля опытных вырастет до 60%?
  5. Какие данные ещё запросить, прежде чем принять решение?
Разбор
Агрегат — взвешенная сумма, а не факт
Агрегат +8% не означает «стало лучше». Он означает: «стало лучше для 55% пользователей и хуже для 45%, которые приносят 70% денег». Если катить для всех — engagement новичков вырастет, но revenue на опытных упадёт. Чистый эффект на revenue — скорее отрицательный. Правильный подход: катить новичкам, сохранить старую программу для опытных, запросить retention и revenue по сегментам через 4 недели.
Итог: решение

Не катить для всех. Катить новичкам (сегментированный rollout). Для опытных — оставить текущую или перепроектировать программу отдельно. Запросить: revenue по сегментам, retention D14 по сегментам, переход новичков в «опытные» (через какое время новая программа перестаёт подходить). Риск «для всех»: потеря 70% revenue-сегмента ради +25% engagement у менее прибыльного.

Мини-задачи

Видеосервис: стабильный retention из разнонаправленных трендов
Retention D30 = 50%, стабилен месяц к месяцу. Но «сериальные» пользователи (retention 70%) теряют долю. «Фильмовые» (retention 30%) — растут. Агрегат стабилен, потому что падение одних компенсирует рост других.
Ловушка агрегата
Стабильность агрегата скрывает потерю самого ценного сегмента
Ключевой сегмент
«Сериальные» — выше retention и выше LTV. Их уход обрушит агрегат с лагом
Что будет при смене микса
Если доля «сериальных» упадёт с 40% до 25%, retention D30 ≈ 40% — резкое падение «из ниоткуда»
Преждевременное решение
«Retention стабилен — всё ок» без проверки сегментов
E-commerce: рост среднего чека при потере сегмента
Средний чек +12% после редизайна. Заказы с чеком > 5000 выросли. Заказы < 1000 — резко упали. Общее количество заказов снизилось. Средний чек вырос не потому, что клиенты стали покупать дороже, а потому что дешёвый сегмент ушёл.
Ловушка агрегата
Рост среднего чека — следствие потери нижнего сегмента, а не роста ценности
Ключевой сегмент
Дешёвый — он давал объём. Его потеря снизит total revenue
Что будет при смене микса
Если вернуть дешёвый сегмент — средний чек упадёт, но total GMV вырастет
Преждевременное решение
«Средний чек вырос — редизайн успешен»
B2B: ARPU растёт, малые клиенты уходят
SaaS B2B-платформа. Средний ARPU вырос на 15% за квартал. При анализе: крупные клиенты (Enterprise) платят больше и остаются. Малые (SMB) — churn вырос на 30%. ARPU рос не потому, что клиенты платят больше, а потому что уходящие SMB тянули среднее вниз.
Ловушка агрегата
ARPU растёт за счёт «выживания сильных», а не улучшения монетизации
Ключевой сегмент
SMB — pipeline для Enterprise. Потеря SMB = потеря будущего роста
Что будет при смене микса
Если SMB-отток продолжится, ARPU будет расти — но total revenue упадёт
Преждевременное решение
«ARPU +15% — монетизация улучшается» без анализа churn по сегментам
Финтех: конверсия растёт только в high-income
Финтех-сервис: A/B-тест нового flow. Конверсия в целом +6%. При разбивке: high-income (+18%), mid-income (+2%), low-income (−3%). Новый flow предполагает больше данных — high-income легче их предоставить, low-income отсеивается.
Ловушка агрегата
+6% — это win для верхнего сегмента и loss для нижнего
Ключевой сегмент
Зависит от стратегии: mass market → low-income критичен; premium → high-income достаточен
Что будет при смене микса
При масштабировании доля low-income вырастет — агрегат упадёт
Преждевременное решение
Катить всем без сегментированного rollout