Компания предоставляет партнерам сервис для проведения платежей. Одно из преимуществ перед конкурентами является большое количество платежных систем, из которых пользователь может выбрать.
Управление продуктом решило добавить еще одну платежную систему, предполагая, что это улучшит пользовательский опыт.
Пользовательский путь выглядит следующим образом:
- пользователь открывает лист с различными платежными системами (open-list)
- Выбирает или не выбирает платежную систему из множества (open-payment)
- Создает заявку на оплату или не создает (create-invoice)
Последующего события не может быть без предыдущего, однако иногда в данных происходит
сбой и события теряются. Иногда поведение пользователей может различаться среди разных
сегментов (между платформами ui_version или странами, например).
Чтобы оценить эффект от изменений, был проведен A/B-тест. Группе A новая платежная система не показывалась, а группе B - показывалась.
Задача:
1. Выбрать метрику/метрики, с помощью которых будет оцениваться результат
эксперимента.
2. Выбрать стат.метод для оценки.
3. Написать код на Python для анализа результатов.
4. Написать отчет о результатах и выводах для продакт менеджера, который не погружен в
статистику.
Описание данныхДанные представляют из себя логи событий за время эксперимента. Скачать данные здесь.