На митапе ты узнаешь, как Process mining может улучшить принятие решений в A/B-тестах, анализируя поведение пользователей и выявляя закономерности. Посмотришь на опыт построения надежного пайплайна для расчета ETL в A/B-тестах, что поможет избежать ошибок и повысить доверие к результатам. Также поговорим о контроле за метриками и решение конфликтных кейсов. 


Ведущий митапа – Кирилл Кочнев, руководитель продуктовой аналитики в hh.ru 

Программа находок в этот вечер: 

 находка номер 1 

Как Process mining помогает улучшить процесс принятия решений в A/B-тестах

В докладе расскажу о том, как детальное изучение клик-стрима пользователей, фильтрация на основе последовательностей событий, построение графов переходов и моделей процессов помогают лучше понять закономерности, которые возникают в тестовых группах и порождают разницу в значениях целевых метрик.

находка номер 2 

Как в hh.ru устроен пайплайн-расчет ETL в A/B-тестах 

A/B-тесты – штука непростая, можно и ошибиться. Мы покажем, как обсчитывать сотни A/B-тестов в день и доверь результатам. Как построить процесс A/B-тестов так, чтобы данным можно было доверять. 

 находка номер 3   

A/B-тестирование, как метод полного контроля за принятием решений

Почему важно контролировать не только метрики, на которые направлена фича? Как бороться с проблемой множественного тестирования при контроле большого количества метрик? Как обеспечить контроль за всеми метриками компании? Как можно решать конфликтные кейсы по экспериментам? 

Расписание 

19:00-19:10 – стартуем;

19:10-19:40 – Как Process mining помогает улучшить процесс принятия решений в A/B-тестах;

19:40-20:10 – Как в hh.ru устроен пайплайн-расчет ETL в A/B-тестах;

20:10-20:40 – A/B-тестирование, как метод полного контроля за принятием решений. 

Присоединяйся к нам! За лучшие вопросы и находки на митапе – дарим подарки!