Осталось два частых случая: сравнить конверсии (доли) и сравнить распределение категорий. Плюс — простая карта, какой тест когда.
z-test для долей — когда сравниваем конверсии или доли («оплатили 5% против 5.4%»). Хи-квадрат — когда сравниваем распределение категорий («как пользователи распределились по тарифам в двух группах»).
Таблица выбора теста:
• средние двух групп, данные аккуратные → t-test
• средние, но выбросы/асимметрия → Манна-Уитни
• доли/конверсии двух групп → z-test для долей
• распределение по категориям → хи-квадрат
Конверсия в покупку A против B — z-test. Распределение пользователей по тарифам «Лайт/Про/Макс» в двух когортах — хи-квадрат.
Аналитик держит таблицу выбора в голове как маршрутизатор: тип величины → тест. И помнит: тест оценивает случайность, а не «доказывает правоту».
Нужно сравнить конверсию в покупку между группами A и B. Какой тест?