"Os mercados de previsão costumam acertar" é o tipo de afirmação que as pessoas repetem sem nunca verificar. Também é testável — um mercado que diz 70% deveria vencer cerca de sete vezes em dez, e se não o fizer, o mercado não é tão preciso quanto os seus fãs pensam. A precisão não é uma sensação; é uma propriedade aritmética que se pode medir contra resultados já resolvidos, um venue de cada vez.
Se ainda está a formar uma ideia sobre o que são os mercados de previsão e como os seus preços se tornam probabilidades, comece por aí. Este guia é sobre a pergunta mais difícil: uma vez que um mercado imprime um número, quão bom é esse número, e como é que alguma vez o saberia? A resposta curta para quão precisos são os mercados de previsão é que os melhores são surpreendentemente bem calibrados, os piores não são, e a única forma honesta de os distinguir é pontuá-los.
TL;DR
- A precisão tem um significado preciso: os eventos a 70% de um mercado bem calibrado acontecem ~70% das vezes. Isso é mensurável contra mercados resolvidos.
- Dois números fazem o trabalho: o erro de calibração (ECE) — o quanto as probabilidades previstas se afastam das taxas reais — e o Brier score, que também recompensa a confiança.
- Uma boa calibração precisa de um teste justo: mercados resolvidos suficientes, resultados confirmados pelo fornecedor e histórico real anterior à resolução. Mercados de vida curta e livros pouco líquidos distorcem-na.
- Venues de dinheiro real com liquidez profunda (Polymarket, Kalshi) tendem a ser bem calibrados; plataformas de dinheiro fictício e de previsão também podem ser, mas os incentivos são diferentes.
- A CoinRithm pontua a calibração por venue a partir de resultados resolvidos e publica-a na página de fontes — para que "preciso" seja um número que pode inspecionar, e não uma frase de marketing.
- Nenhum mercado é uma bola de cristal. A calibração mede a honestidade das probabilidades, não a certeza sobre o futuro.
O que "preciso" realmente significa
Há duas coisas diferentes que as pessoas querem dizer com um mercado de previsão preciso, e confundi-las causa a maior parte da confusão.
A primeira é a precisão de resolução: o resultado que o mercado disse ser mais provável acabou realmente por acontecer? Este é o intuitivo — "o mercado acertou na eleição" — mas por si só é quase inútil. Um mercado que diz 55% e o favorito vence parece "certo", mas uma previsão de 55% que se concretiza é pouco mais informativa do que atirar uma moeda ao ar. Julgar uma previsão probabilística pelo facto de o seu favorito ter vencido deita fora o número que a tornou uma previsão em primeiro lugar.
A segunda, e a que importa, é a calibração: em todas as vezes que um venue disse "70%", a coisa aconteceu cerca de 70% das vezes? Um venue perfeitamente calibrado é aquele cujas probabilidades declaradas correspondem à realidade em agregado. Pode estar errado em qualquer mercado individual — é isso que uma probabilidade significa — enquanto é extraordinariamente fiável ao longo de centenas deles. A calibração é a propriedade que permite confiar num preço que nunca viu antes, que é exatamente o que precisa quando lê um mercado sem contexto.
Tudo o que se segue é sobre medir a segunda coisa.
A calibração, numa imagem
Pegue em todos os mercados resolvidos de um venue e agrupe as suas previsões pela probabilidade que atribuiu: todas as previsões de 0–10% num intervalo, 10–20% no seguinte, e assim por diante até 90–100%. Agora, dentro de cada intervalo, calcule a taxa real — que fração desses eventos aconteceu de facto.
Para um venue bem calibrado, os dois alinham-se: o intervalo de 20–30% resolve Yes cerca de um quarto das vezes, o intervalo de 70–80% cerca de três quartos das vezes. Represente graficamente a probabilidade prevista contra a taxa real e os pontos ficam colados à diagonal. Onde os pontos descaem abaixo da linha, o venue foi demasiado confiante (disse 80% mas esses eventos aconteceram 65% das vezes); onde ficam acima, foi pouco confiante.
A CoinRithm constrói exatamente estes intervalos de confiabilidade para cada venue com histórico suficiente, usando a probabilidade que o mercado atribuiu cerca de 24 horas antes da resolução — tarde o suficiente para que a maior parte da informação esteja no preço, cedo o suficiente para que seja uma previsão genuína e não uma formalidade de liquidação. É a mesma disciplina que um serviço de meteorologia usa quando verifica se os seus dias de "30% de probabilidade de chuva" realmente choveram 30% das vezes.
As duas pontuações que a resumem
Um gráfico de confiabilidade é honesto mas difícil de comparar num relance, por isso dois números individuais condensam-no.
Erro de calibração (ECE)
O Erro de Calibração Esperado é a diferença média, ponderada pela amostra, entre a probabilidade prevista de cada intervalo e a sua taxa real. Zero é perfeito; quanto maior fica, mais as probabilidades declaradas de um venue se afastam da realidade. O ECE é o título mais limpo para "o número deste venue é fiável?" porque não ignora nada e não embeleza nada — apenas mede a distância à verdade. Na amostra da CoinRithm, os venues de dinheiro real mais bem calibrados situam-se próximo da diagonal, com um erro de calibração pequeno o suficiente para que as suas probabilidades valha a pena tomar pelo valor de face; pode consultar o valor atual de cada venue na página de fontes.
O Brier score
O Brier score é o erro quadrático médio de uma previsão probabilística: para cada mercado, tome a diferença entre a probabilidade atribuída ao que realmente aconteceu e 1 (ou 0 para o que não aconteceu), eleve ao quadrado e faça a média. Recompensa ser tanto calibrado como confiante — um venue que hedgeia tudo em direção a 50% pode parecer calibrado enquanto é quase inútil, e o Brier pune essa timidez. Mais baixo é melhor; 0 é um previsor perfeito e confiante, 0,25 é a pontuação que obtém dizendo 50% a tudo.
As duas pontuações respondem a perguntas diferentes. O erro de calibração pergunta "as probabilidades são honestas?" O Brier pergunta "as probabilidades são honestas e precisas?" Uma afirmação séria de precisão cita ambas.
Por que um teste justo é mais difícil do que parece
A maioria dos títulos "os mercados de previsão são 90% precisos" batota discretamente, geralmente de uma destas formas — e evitá-las é a razão pela qual os nossos números são mais conservadores do que os valores de marketing que verá noutros lugares.
- Precisão de resolução escolhida a dedo. Contar "o favorito venceu" em vez de pontuar a probabilidade inflaciona qualquer venue com muitos mercados desequilibrados e quase certos. Pontue as probabilidades, não os vencedores.
- Avaliar em mercados já liquidados de qualquer forma. Incluir a probabilidade de um mercado no instante antes de resolver — quando a resposta já é óbvia — faz com que todos os venues pareçam clarividentes. Nós pontuamos o preço cerca de 24h antes, para que seja uma previsão real.
- Amostras minúsculas ou pouco líquidas. Dez mercados resolvidos não provam nada. A calibração precisa de uma amostra mínima (exigimos um patamar antes de publicarmos o valor de um venue) e de liquidez suficiente para que os preços reflitam convicção real em vez de uma ordem obsoleta.
- Excluir as coisas difíceis. Mercados de curta duração sem histórico real anterior à resolução são descartados de um teste de calibração limpo, o que honestamente reduz o tamanho da amostra de alguns venues — preferimos mostrar um número menor e justo do que um maior e lisonjeiro.
É por isso que a precisão é uma quantidade por venue e por metodologia, não uma propriedade dos "mercados de previsão" enquanto categoria. Dois venues podem ambos chamar-se precisos e significar coisas radicalmente diferentes.
Então — eles são precisos?
Para os venues que passam num teste justo, sim, e muitas vezes de forma impressionante. Mercados de dinheiro real profundos como a Polymarket e a Kalshi regulada pela CFTC tendem a ser bem calibrados em amostras grandes: os seus 70% são mesmo cerca de 70%. Isso não é magia — é dinheiro. Quando estar errado custa capital real, os preços demasiado confiantes são arbitrados em direção à verdade, que é o mesmo mecanismo que o nosso guia de divergência de probabilidade descreve entre venues.
Plataformas de dinheiro fictício e de previsão como a Manifold e a Metaculus também podem ser bem calibradas — por vezes de forma notável — porque a reputação e as regras de pontuação dão aos previsores o seu próprio incentivo para serem honestos. Mas como nada está em jogo financeiramente, nunca misturamos as suas probabilidades num número apoiado por dinheiro; a probabilidade de referência é apenas de dinheiro real exatamente por essa razão.
A ressalva essencial: a calibração é uma afirmação sobre as probabilidades, não sobre o futuro. Um mercado perfeitamente calibrado que diz 30% está a dizer-lhe a verdade mesmo quando o resultado de 30% acontece. Precisão significa que o preço é uma probabilidade honesta — não significa que o mercado saiba o que vai acontecer. Tratar um 80% bem calibrado como uma certeza é um dos erros mais comuns nos mercados de previsão.
Como a CoinRithm mede e mostra isto
Calculamos a calibração a partir de mercados resolvidos com resultados confirmados pelo fornecedor — ou seja, o próprio venue reportou como o mercado foi liquidado, não um palpite — e tempos de resolução confirmados pelo fornecedor, e depois pontuamos cada par (resultado, probabilidade) contra a realidade. Os resultados por venue, incluindo quanto do histórico de cada venue é sequer utilizável para um teste de calibração justo, aparecem na página de fontes ao lado do seu modelo de taxas, moeda de liquidação e saúde da resolução.
A precisão também alimenta a nossa camada de confiança. Mercados demasiado pouco líquidos, demasiado ambíguos ou demasiado próximos da resolução para serem confiáveis com segurança são sinalizados pelo nosso motor de qualidade de dados em vez de serem confiados silenciosamente — um preço de baixa qualidade é exatamente o tipo que corrói a calibração de um venue. E quando agentes de IA negoceiam na nossa plataforma, pontuamos as suas previsões com a mesma disciplina de Brier, descrita em como avaliamos as previsões dos agentes, para que um agente não possa reivindicar competência que não demonstrou.
Se quiser verificar isto por si mesmo, cada mercado resolvido e o seu resultado confirmado pelo fornecedor está acessível através da API de dados de mercados de previsão gratuita, e toda a abordagem de pontuação está escrita na nossa página de metodologia.
FAQ
Quão precisos são os mercados de previsão, numa frase?
Os bem geridos e de liquidez profunda são bem calibrados — os seus eventos a 70% acontecem cerca de 70% das vezes — enquanto os mercados pouco líquidos ou de vida curta são muito menos fiáveis, razão pela qual a precisão tem de ser medida por venue em vez de assumida para toda a categoria.
Qual é a diferença entre calibração e Brier score?
O erro de calibração (ECE) mede se as probabilidades declaradas de um venue correspondem às taxas reais — "as probabilidades são honestas?" O Brier score mede a mesma coisa mas também recompensa a confiança, penalizando um previsor que hedgeia tudo em direção a 50% — "as probabilidades são honestas e precisas?" Uma afirmação de precisão credível reporta ambos.
Os mercados de previsão são mais precisos do que as pesquisas?
Muitas vezes, em agregado e mais perto da resolução, porque os mercados incorporam continuamente nova informação e colocam dinheiro atrás da convicção — mas não são infalíveis e podem mover-se com o sentimento. Comparamos os dois diretamente em mercados de previsão vs pesquisas.
Por que não contam apenas quantas vezes o favorito venceu?
Porque isso deita fora a probabilidade. Um mercado que diz 55% e vence é pouco mais informativo do que atirar uma moeda ao ar, enquanto um 90% bem calibrado que perde uma vez em dez continuava a ser uma boa previsão. Pontuar a probabilidade contra o resultado real — não o vencedor — é o único teste justo.
Um mercado de previsão pode estar bem calibrado e ainda assim errado?
Sim, e é esse o ponto. Um mercado calibrado que diz 30% está a dizer-lhe a verdade sobre as probabilidades mesmo quando o resultado de 30% acontece. A calibração mede a honestidade do preço, não a certeza sobre o futuro — nenhum mercado é uma bola de cristal.
Onde posso ver os números de precisão da CoinRithm?
Na página de fontes, que mostra a calibração e a saúde da resolução por venue, e nas tabelas de pontuação dos agentes da Arena para agentes de IA. Os dados subjacentes de mercados resolvidos são gratuitos de ler através da API pública.
