Запустили A/B-тест с планом 50/50, а в логах видим 53/47 при миллионе пользователей. Что описывает термин SRM (Sample Ratio Mismatch) применительно к этой ситуации?

Обычно в эксперименте ожидают распределение вроде 50/50 или 90/10, но фактически получают другое. Это может быть из-за ошибок в раздаче вариантов, фильтров, сбоев трекинга или особенностей доставки фичи. SRM опасен тем, что группы становятся несопоставимыми и выводы по эффекту перестают быть надёжными. Поэтому проверка SRM (например, через chi-square) — стандартная страховочная процедура перед чтением результатов теста.