Почему назначение варианта как variant = random.choice([0, 1]) при каждом запросе пользователя — плохая идея для A/B теста?

Если вариант меняется при каждом запросе, один и тот же пользователь получает смешанный опыт. Тогда вы измеряете не эффект варианта, а усреднение двух вариантов внутри пользователя, что обычно ведет к сильному размыванию. Такая схема также усложняет отладку и интерпретацию метрик по времени. Правильнее использовать детерминированный bucketing (разбивка пользователей на группы) по user_id или по другой устойчивой сущности.