Есть две кампании: (1) 1 клик и 1 показ, (2) 9 кликов и 99 показов. Чему равен общий CTR по двум кампаниям при корректной агрегации?
A54.5% как среднее двух
CTR без весовB10% как отношение суммарных кликов к суммарным показам
C100% так как в одной кампании
CTR равен 1D9.09% как
CTR второй кампанииПравильный ответ. Корректный общий
CTR считается как сумма кликов, деленная на сумму показов, то есть это weighted average по показам.Разбор
Если усреднить два CTR без весов, кампания с 1 показом получит тот же вес, что и кампания с 99 показами, и результат будет завышен. Правильная агрегация для доли на показ — это ratio of sums: (1+9)/(1+99). В данном примере общий CTR равен 10%.
Проверь себя · 1/3разбор после ответа
В чем основная идея
delta method (дельта-метод для ratio-метрик) при оценке разницы ratio metric между вариантами?Ещё вопросы по теме «Ratio-метрики и бутстреп»
- Какая из метрик является `ratio metric`?
- Вы считаете `ARPU` в эксперименте; что является числителем и знаменателем этой метрики?
- Есть таблица по пользователям с колонками conversions (число конверсий) и visits (число визитов). Вы хотите получить групповой `conversion rate` по визитам; какой расчет корректен?
- Почему анализ `ratio metric` вроде `CTR` часто нельзя делать как «обычный средний показатель» без оговорок?
- Вы посчитали пользовательские доли clicks / impressions и хотите получить групповой `CTR`. Что нужно сделать, чтобы итог совпал с суммарными clicks / суммарными impressions?
- Все вопросы по «Ratio-метрики и бутстреп» →