Проект банка Топ-3. Цель проекта — расширение экспериментальной базы, системная проверка входящих гипотез и оценка того, какую дополнительную ценность данные дают моделям и бизнес-продуктам.
Основной фокус роли — использование A/B-тестирования для принятия решений на основе данных: от постановки эксперимента до интерпретации результатов и оценки полученного эффекта
Твои задачи:
- Изучить текущую AB-платформу банка: понять её архитектуру, возможности, ограничения и текущее применение в бизнес-процессах
- Проанализировать проблемы и потребности команд, которые используют платформу (в частности, команды кампаний), выявить их болевые точки и ожидания от системы
- Сформулировать подходы и методы проведения AB-тестирования с акцентом на использование данных: разработать методологию, которая позволит оценивать влияние работы с данными на метрики продуктов
- Разработать рекомендации по доработке платформы или процессов: предложить конкретные меры, необходимые для успешного внедрения и масштабирования AB-тестов
- Подготовить план мероприятий
- Оформить выводы и формализовать результаты
Что мы ждем от тебя:
- Глубокая практическая экспертиза в A/B-тестировании
- Опыт самостоятельного проектирования экспериментов, а не только анализа готовых результатов
- Опыт работы с продуктовыми и бизнес-метриками
- Уверенное знание математической статистики и методов проверки гипотез
- Опыт оценки статистической значимости и расчета размера выборки
- Умение выявлять и учитывать факторы, способные исказить результаты эксперимента
- Опыт генерации и оценки продуктовых гипотез
- Способность переводить результаты анализа в понятные бизнес-выводы и рекомендации
Будет плюсом:
- Опыт применения продвинутых методов анализа экспериментов: CUPED, MDE, последовательное тестирование
- Опыт использования методов снижения дисперсии и повышения чувствительности экспериментов
- Опыт анализа причинно-следственного эффекта
- Опыт оценки дополнительного прироста от воздействия
- Опыт работы с большим количеством параллельных экспериментов
- Опыт построения или развития экспериментальной методологии в продуктовой компании
Что мы обеспечиваем:
- Внутренние семинары, митапы, мы очень любим учиться новому
- ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи
- Технику для комфортной работы
- Сессии профессионального развития персонала, результатом которой является план индивидуального развития каждого сотрудника