Почему на практике метод максимального правдоподобия часто реализуют как максимизацию log L(θ) вместо L(θ)?
AПотому что логарифм меняет максимум на минимум, и поэтому оптимизировать
log L(θ) оказывается проще на практикеBПотому что переход к
log автоматически делает любую точечную оценку несмещённой и снижает дисперсию параметровCПотому что логарифм применим только к дискретным распределениям и поэтому требуется именно для метода максимального правдоподобия
DПотому что
log монотонно возрастает (точка максимума сохраняется), и произведения переходят в суммы, что численно стабильнееПравильный ответ. Логарифмическое правдоподобие сохраняет точку максимума и делает оптимизацию численно стабильнее и проще.
Разбор
Для независимых наблюдений правдоподобие часто равно произведению многих вероятностей, и числа быстро становятся слишком малыми для машинной арифметики. Логарифм превращает произведение в сумму и обычно делает градиенты удобнее. При этом точка максимума не меняется, потому что логарифм монотонно возрастает. Ошибка — думать, что переход к log меняет саму точечную оценку или связан со свойствами несмещённости и дискретности.
Проверь себя · 1/3разбор после ответа
Время ожидания моделируется как
Exponential(λ). По выборке среднее время ожидания равно 5 секунд. Какая точечная оценка MLE для параметра λ?Ещё вопросы по теме «Точечные оценки и MLE»
- Вы оцениваете вероятность конверсии `p` по выборке: из 100 пользователей 56 оплатили. Что является точечной оценкой параметра `p`?
- Что означает свойство несмещённости для оценки θ_hat параметра θ?
- Как лучше всего описать состоятельность последовательности оценок `θ_hat_n`?
- Есть две оценки одного параметра: `θ_hat_A` несмещённая, но с высокой дисперсией; `θ_hat_B` слегка смещённая, но с низкой дисперсией. По какому критерию можно оправданно выбрать `θ_hat_B` как более полезную точечную оценку?
- Две оценки параметра `θ` обе обладают свойством несмещённости. У `θ_hat_A` дисперсия меньше, чем у `θ_hat_B` на том же размере выборки. Что можно сказать про эффективность (интуитивно)?
- Все вопросы по «Точечные оценки и MLE» →