КВАНТ-АУДИТ // ВЕРОЯТНОСТНАЯ КАЛИБРОВКА
Калькулятор Brier Score — калибровка и оценка точности прогнозов
Аудит точности прогнозов рынков предсказаний по метрике Brier Score. Оценка кривой надежности, декомпозиция разрешения и бенчмарк суперпрогнозистов.
Исторические датасеты калибровки:
СРЕДНИЙ BRIER SCORE (BS)
0.094
BRIER SKILL SCORE (BSS)
+62.4%
КЛАСС ТОЧНОСТИ
SUPERFORECASTER
ДИСКРИМИНАЦИЯ ИСХОДОВ
HIGH (0.18)
Журнал прогнозов и квадратичные отклонения
| Событие / Рынок | Прогноз P(Yes) | Реальный исход | Квадрат ошибки (f - o)² |
|---|
Эмпирическая калибровочная кривая (Прогноз vs Факт)
Часто задаваемые вопросы
Что такое Brier Score и как он интерпретируется?
Brier Score — это среднее квадратичное отклонение между прогнозной вероятностью и реальным бинарным исходом. 0.00 — абсолютное всеведение, 0.25 — случайное угадывание (монетка), ниже 0.15 — институциональный уровень суперпрогнозистов (Good Judgment Project).
Что показывает Brier Skill Score (BSS)?
BSS оценивает относительное превосходство над случайным гаданием: BSS = 1 - (BS / 0.25). Положительный BSS подтверждает статистическую валидность альфы.
В чем разница между калибровкой и разрешением?
Калибровка гарантирует, что события с прогнозом 70% наступают ровно в 7 случаях из 10. Разрешение показывает смелость модели отдавать уверенные вероятности (90%/10%) вместо безопасных 50%.