Перейти к содержимому
SBER 288,19 ₽ 0,16% рост за прошлую сессиюIMOEX 2 351,54 0,07% снижение за прошлую сессию
·Технологии·источник: Habr·1 мин

Значимый A/B‑тест завышает рост. Считаем, во сколько раз

A/B‑тест показал +6% к конверсии при p‑value 0,03, и команда закладывает результат в бизнес‑прогноз. Но при низкой мощности эксперимента случайный шум может существенно завышать оценку эффекта. В статье разбираем, как работает проклятие победителя, насколько сильно оно искажает результаты и какие методы помогают получить более реалистичную оценку.

Разбираем A/B-тесты

Отрывок из ленты источникаЧитать у источника: Habr

Значимый A/B‑тест завышает рост. Считаем, во сколько раз