Релиз новой посадочной страницы был в пятницу, а сравнение сделали между субботой и четвергом и увидели падение conversion rate. Какой вероятный confounder делает сравнение нечестным?

Даже без изменений продукта метрики часто отличаются между буднями и выходными. Если релиз совпал со сменой day-of-week, вы не отделите эффект релиза от сезонности внутри недели. Корректнее сравнивать like-for-like по одинаковым дням или делать stratification по day-of-week.