AUDITORIA QUANT // CALIBRAÇÃO PROBABILÍSTICA
Analisador de Brier Score — Avaliação de Acurácia e Calibração de Modelos
Audite a acurácia de previsões com a métrica Brier Score. Avalie curvas de confiabilidade, variância de decomposição e compare com superforecasters.
Benchmarks Históricos:
BRIER SCORE MÉDIO (BS)
0.094
BRIER SKILL SCORE (BSS)
+62.4%
NÍVEL DE CALIBRAÇÃO
SUPERFORECASTER
PRECISÃO DISCRIMINANTE
HIGH (0.18)
Previsões de Eventos e Perda Quadrática
| Descrição do Evento | Previsão P(Yes) | Resultado Real | Erro Quadrático (f - o)² |
|---|
Curva Empírica de Calibração (Previsto vs Observado)
Perguntas Frequentes
O que é o Brier Score e como interpretá-lo?
Mede o erro quadrático médio entre probabilidades previstas e resultados reais. 0.0 é precisão perfeita, 0.25 equivale a chutes 50/50 e abaixo de 0.15 indica acurácia de elite.
O que representa o Brier Skill Score (BSS)?
Mede a melhoria relativa sobre um modelo aleatório: BSS = 1 - (BS / 0.25). Valores positivos comprovam habilidade preditiva real.
Qual a diferença entre Calibração e Resolução?
Calibração garante que eventos com 70% de chance ocorram 7 em cada 10 vezes. Resolução mede a ousadia e capacidade de separar desfechos com convicção.