← На главную
Программа курса: A/B-тестирование: принятие решений на практике
Курс структурирован по 4 типам решений, которые повторяются в реальных экспериментах. Каждый тип решения содержит уроки и практику.
Тип решения 1: Можно ли верить эффекту?
Проверка достоверности: сигнал vs шум, stat sig vs practical sig, устойчивость, лаги, окно оценки.
Тип решения 2: Что именно дало эффект?
Декомпозиция механизма: цена vs объём, воронка, позиция, качество инвентаря.
Тип решения 3: Можно ли масштабировать?
Системный vs локальный эффект: сегменты, каннибализация, total-first подход.
Тип решения 4: Что делать с неудачным экспериментом?
Негативные и нулевые результаты: guardrails, когда останавливать, повторять или переработать.
Треки изучения
Быстрый (30–40 минут)
Цель: быстро поймать 4 ключевых ловушки по типам решений.
Базовый (≈3 часа)
Цель: пройти все сценарии 001–012 последовательно.
- 001 «CPM вырос, а выручка упала» — учит: цена × объём = выручка, floor может отрезать инвентарь
- 002 «Выручка выросла без роста CPM» — учит: эффект через объём (show rate, fill, coverage)
- 003 «Статзначимо, но бизнес-эффекта нет» — учит: статистическая ≠ практическая значимость
- 004 «Ничего не произошло — и это результат» — учит: как закрывать тесты без эффекта, проверка power/MDE
- 005 «Сегменты спорят (Simpson)» — учит: агрегат может маскировать эффекты, нужен reweight
- 006 «Окно меняет вывод» — учит: лаги и выбор окна, stop rules
- 007 «Локальная победа, системный проигрыш» — учит: каннибализация, total-first подход
- 008 «Lazy Load — рост через воронку» — учит: оптимизация воронки показов через отложенную загрузку
- 009 «Рост видимости без роста давления» — учит: эффект через изменение позиции и рост видимости
- 010 «Больше показов — меньше денег» — учит: расширение инвентаря дешёвыми показами вредит монетизации
- 011 «Адаптивное давление по сегментам» — учит: сегментация и оптимизация давления для разных групп
- 012 «Вовлечённость без денег» — учит: каннибализация внимания, вовлечённость ≠ выручка
Для лидов (60–90 минут)
Цель: тренировать принятие решений и рамку контроля.
Начать курс