Два независимых эксперимента одновременно меняют одну и ту же страницу checkout, оба рандомизируются по user_id. Аудитории пересекаются. Какое решение лучше всего, чтобы интерпретация результатов была надежной?

Если аудитория пересекается, один пользователь может одновременно находиться под влиянием двух изменений, и эффекты могут не складываться линейно. Тогда оценка каждого эксперимента по отдельности становится трудно интерпретируемой и может быть смещенной. Практичные решения — взаимно исключающие слои bucketing (разбивка пользователей на группы) или факторный дизайн 2x2, если вы хотите измерять взаимодействие. Важно также логировать участие пользователя в каждом экспериментальном слое.