А/B тестирование и анализ данных в Python // Урок 6 от Skypro

Хотите сменить работу, но не определились с профессией?
Пройдите тест и получите бесплатную карьерную консультацию:
https://go.sky.pro/proftest_youtube

Это шестой урок «Python для анализа данных», и вы узнаете, как правильно создавать а/б тесты и как грамотно анализировать данные этих тестов.

Содержание видео:

00:00:00 Вступление про курс
00:00:47 Интро: Зачем АБ-тестирование в курсе про Python
00:01:08 Что нам предстоит в этом блоке
00:01:54 Суть АБ-тестирования (Метрика)
00:04:32 Дизайн эксперимента (Проектирование эксперимента)
00:05:42 Первый подход к анализу. Окно конверсии (Пример)
00:07:32 Как правильно считать конверсию
00:09:48 Школа Skypro (Описание курсов, преимущества)
00:10:51 Сырые данные и сегменты
00:15:45 Проверка сегментов (Анализ результатов и корректировка эксперимента)
00:18:03 Проверка стат. гипотезы
00:18:44 Статистический критерий и ошибка первого рода (Нулевая и Альтернативная гипотезы)
00:21:49 Как работает стат.критерий (p-value), Хи-квадрат
00:24:18 Влияние эксперимента на другие метрики (Подвыборки с возвращением)
00:28:32 Bootstrap - знакомимся с функцией и готовим данные
00:30:20 Bootstrap - применяем функцию
00:30:56 Мощность (Мощность теста)
00:34:21 Рассчитываем количество наблюдений (Минимальный обнаруженный эффект)
00:36:26 Итоги (Чек-лист А/B теста)