🧪 A/B-тесты и статистика на собеседовании
Блок про эксперименты и статистику — там, где чаще всего заваливают продуктовых аналитиков. Разбираем формулировки, которые реально звучат на интервью.
77 материалов · страница 1 из 2
Центральная предельная теорема (ЦПТ) простыми словами
Центральная предельная теорема (ЦПТ) простыми словами: почему среднее выборки почти нормально и зачем это для A/B-тестов и доверительных интервалов.
Доверительный интервал простыми словами
Доверительный интервал простыми словами: что это, как считать 95% CI для среднего и доли, как правильно интерпретировать. Формулы, Python, примеры.
Корреляция Пирсона и Спирмена — когда что использовать
Корреляция Пирсона и Спирмена: в чём разница, какие формулы и когда что использовать. Расчёт в Python и SQL, примеры и вопросы с собеседований аналитика.
Перцентиль и квантиль — что это простыми словами
Перцентиль и квантиль простыми словами: что это, чем отличаются, как считать в Python и SQL. Медиана, квартили, IQR, P90, P95, P99 на примерах из аналитики.
Нормальное распределение простыми словами
Нормальное распределение простыми словами: что это, среднее и стандартное отклонение, правило 68-95-99.7, z-оценка, как проверить нормальность данных.
P-value простыми словами
P-value простыми словами: что это, как интерпретировать и почему p < 0,05 — не гарантия. Связь с доверительным интервалом, ошибки I и II рода, примеры.
Размер выборки для A/B-теста: формула и расчёт
Размер выборки для A/B-теста: формула расчёта, MDE, мощность и альфа. Калькулятор на Python и примеры для конверсии и средних. Вопросы с собеседований.
Стратификация в A/B-тестах: зачем и как
Стратификация в A/B-тестах: что это, зачем делить выборку на страты, как это снижает дисперсию и ускоряет тесты. Примеры, SQL и вопросы с собеседований.
Выбросы в данных: что это, как находить и что с ними делать
Выброс в статистике — что это, как его найти (IQR, z-score, box plot) и когда удалять, а когда оставлять. Примеры на Python и SQL для аналитиков.
A/B-тесты для продакт-менеджера с нуля
A/B-тесты для продакт-менеджера с нуля: дизайн, размер выборки, метрики, типичные ошибки.
Базовая статистика для продакт-менеджера
Базовая статистика для продакт-менеджера: среднее vs медиана, p-value, доверительные интервалы, дисперсия.
A/B-тест цены продукта: как сделать правильно
A/B-тест цены: дизайн, метрики, размер выборки, этика и частые ошибки. Как тестировать pricing без потери доверия пользователей.
Как проектировать A/B-тест пошагово
Пошаговый гайд по проектированию A/B-теста: от гипотезы до ship decision.
Bootstrap в A/B-тестах
Bootstrap для A/B analysis: как использовать когда distribution non-normal. Practical approach.
Как перейти из QA в аналитика данных
Карьерный переход из QA в аналитика данных. Shared skills, gaps, план подготовки.
Как рассчитать размер выборки A/B
Sample size calculator для A/B: формула, practical examples, alpha / beta / MDE.
Логистическая регрессия для аналитика
Логистическая регрессия: предсказание вероятности класса. Интерпретация, odds ratio, применение.
Шпаргалка по A/B-тестам
Короткий справочник по A/B: MDE, мощность, уровень значимости, основные ловушки. Подойдёт как материал перед собеседованием.
Шпаргалка по статистике для аналитика
Краткий справочник по статистике: распределения, проверка гипотез, регрессии и частые ошибки.
A/B-тест vs holdout test
Разница между A/B-тестом и holdout test. Когда использовать каждый, примеры.
Распределение Бернулли простыми словами
Распределение Бернулли простыми словами: одна проба с двумя исходами. Формула, пример, связь с биномиальным.
Биномиальное распределение простыми словами
Биномиальное распределение простыми словами: N проб, K успехов. Формула, пример, использование.
CUPED простыми словами
CUPED простыми словами: метод уменьшения variance в A/B-тестах. Формула, преимущества, когда использовать.
Экспоненциальное распределение простыми словами
Экспоненциальное распределение простыми словами: время до события. Формула, memoryless property, примеры.
Что такое holdout test
Holdout test в аналитике: долгосрочный контроль для A/B. Когда применяется, чем отличается.
Как убрать выбросы в pandas
Как найти и убрать выбросы в pandas: IQR, Z-score, percentile. Код примеры.
Логнормальное распределение простыми словами
Логнормальное распределение простыми словами: доход, цены, длительности. Форма, как отличить.
Network effects и A/B-тесты
Как network effects ломают A/B-тесты. SUTVA нарушение, spillover, cluster-randomized experiments.
Проблема «подглядывания» в A/B
Peeking problem в A/B-тестах: почему нельзя проверять p-value до окончания. Риски и решения.
Распределение Пуассона простыми словами
Распределение Пуассона простыми словами: количество событий за время. Формула, примеры, когда использовать.
Равномерное распределение простыми словами
Равномерное распределение простыми словами: все значения равновероятны. Discrete и continuous, использование.
T-test vs chi-square: разница
Когда использовать t-test, когда chi-square. Разница, примеры, практика для A/B.
Bayesian AB testing: альтернатива frequentist подходу
Байесовский подход к AB-тестам: как работает, отличия от классического, интерпретация результатов, плюсы и минусы.
Что такое A/B-тест простыми словами
A/B-тест простыми словами: что это, как работает, зачем нужен. Примеры, ошибки, как интерпретировать.
Что такое байесовская статистика
Байесовская статистика для аналитика: prior, posterior, отличия от классической. С примерами для A/B-тестов.
Что такое регрессия для аналитика
Регрессия простыми словами: линейная, логистическая, множественная. Зачем нужна аналитику, как интерпретировать.
Что такое t-тест простыми словами
T-тест простыми словами: зачем, как работает, когда использовать, отличия от z-теста. С примерами.
Кейс: A/B-тест не показал значимости. Что отвечать
Разбор кейса «тест не показал значимости»: как отличить нулевой эффект от недостатка мощности, что ответить и что делать дальше.
Примеры guardrail-метрик
Guardrail-метрики: что это, зачем, примеры для e-commerce, SaaS, mobile. Защита продукта.
Задачи на A/B-тесты на собеседовании аналитика
Реальные задачи по A/B-тестированию с собеседований: расчёт мощности, SRM, не значимый результат, пиковые метрики. С разборами и ответами.
Задачи на медиану и перцентили на собеседовании
Задачи на медиану, P90, P95, P99 с собеседований аналитика. SQL и pandas решения. Когда использовать vs среднее.
Задачи на статистику на собеседовании аналитика
Реальные задачи по статистике с собесов аналитика: p-value, доверительные интервалы, мощность, распределения, проверка гипотез. С решениями.
A/A-тест — зачем нужен и как проводить
A/A-тест: зачем проводить перед A/B, как проверить систему сплитования, интерпретация результатов. Вопросы с собеседования аналитика.
Байесовский A/B-тест — чем отличается от частотного
Байесовский A/B-тест: posterior, prior, credible interval. Чем отличается от частотного подхода. Вопросы с собеседования аналитика.
Биномиальное распределение — просто о статистике
Биномиальное распределение: формула, параметры, примеры задач. Связь с A/B-тестами и конверсией. Расчёт в Python. Вопросы с собеседования аналитика данных.
Деревья решений и Random Forest — гайд для аналитика
Деревья решений и Random Forest: как работают, Gini и энтропия, переобучение, feature importance. Python-пример и вопросы с собеседований.
Градиентный бустинг, XGBoost и LightGBM — гайд для аналитика
Градиентный бустинг простыми словами: XGBoost vs LightGBM vs CatBoost, гиперпараметры, Python-пример. Вопросы с собеседований аналитика.
Линейная регрессия простыми словами
Линейная регрессия: формула y = ax + b, метод наименьших квадратов, R², примеры из аналитики. Python-код и вопросы с собеседования.