Brier Score: o número que todo PM deveria rastrear

Todo product manager faz previsões constantemente: 'esse feature vai aumentar retenção em 5%', 'vamos entregar em 3 sprints', 'o churn vai cair se fizermos X'. Essas previsões guiam decisões de roadmap, alocação de recursos e priorização. Mas quase nenhum PM rastreia se suas previsões estavam certas.

O Brier Score é uma métrica simples que mede a acurácia de previsões probabilísticas. Vai de 0 (perfeito) a 1 (completamente errado). Um Brier Score de 0.25 significa que suas previsões são tão boas quanto jogar uma moeda. Superforecasters — as pessoas mais calibradas do mundo — têm scores entre 0.10 e 0.15.

Por que isso importa para PMs? Porque overconfidence é o viés mais destrutivo em produto. Quando você acha que tem 90% de certeza sobre algo mas na realidade tem 60%, você subestima riscos, não cria planos B, e aloca recursos de forma subótima. Multiplicado por dezenas de decisões por mês, o custo é enorme.

O Calibra rastreia seu Brier Score automaticamente. Você faz previsões sobre outcomes do seu produto (adoção de features, métricas de engajamento, prazos de entrega), e o sistema compara com a realidade ao longo do tempo. Mais importante: ele identifica padrões — talvez você seja bem calibrado para estimativas de prazo mas overconfident em previsões de impacto.

A integração com Jira e Linear torna isso quase automático: estimativas de sprint são importadas como previsões, e o resultado real é comparado no final. Sem trabalho extra, você ganha visibilidade sobre a qualidade do seu julgamento — e um caminho claro para melhorar.