Курс по прикладной статистике, A/B тестированию

Содержание

Множественное тестирование

Методы работы с ratio-метриками. Сравнительный анализ линеаризации, дельта-метода, бутстрапа, бакетизации. Методы редукции дисперсии. Стратификация, CUPED

Оценка скорости сходимости среднего по ЦПТ, бакетирование пользователей(md5, sha256), пуассоновский бутстрап

FWL-теорему и связь с CUPED, оценка квантилей с помощью пуассоновского бутстрапа,варианта от RnD Spotify, Evan Miller и бесселевы функции, метода Прайса-Боннета

Задача о многоруких бандитах, реализация стратегий UCB1, сэмплирование Томпсона,softmax, экспоненциальное. Редизайн стратегии UCB1, подсчёт размера выборки для A\B теста

Анализ музыкальных композиций spotify и продаж музыкальных инструментов