"Voorspellingsmarkten hebben meestal gelijk" is het soort bewering dat mensen napraten zonder het ooit te controleren. Het is ook toetsbaar — een markt die 70% zegt, zou ongeveer zeven op de tien keer moeten winnen, en als dat niet gebeurt, is de markt niet zo nauwkeurig als haar fans denken. Nauwkeurigheid is geen gevoel; het is een rekenkundige eigenschap die je kunt meten aan de hand van afgewikkelde uitkomsten, één platform tegelijk.
Als je je beeld nog aan het vormen bent van wat voorspellingsmarkten zijn en hoe hun prijzen kansen worden, begin daar. Deze gids gaat over de moeilijkere vraag: zodra een markt een getal afdrukt, hoe goed is dat getal, en hoe zou je dat ooit weten? Het korte antwoord op hoe nauwkeurig zijn voorspellingsmarkten is dat de beste opvallend goed gekalibreerd zijn, de slechtste niet, en dat de enige eerlijke manier om ze uit elkaar te houden is door ze te scoren.
TL;DR
- Nauwkeurigheid heeft een precieze betekenis: de gebeurtenissen van 70% van een goed gekalibreerde markt vinden ~70% van de tijd plaats. Dat is meetbaar aan de hand van afgewikkelde markten.
- Twee getallen doen het werk: de kalibratiefout (ECE) — hoe ver voorspelde kansen afdrijven van gerealiseerde percentages — en de Brier-score, die ook zekerheid beloont.
- Goede kalibratie vereist een eerlijke test: voldoende afgewikkelde markten, door de aanbieder bevestigde uitkomsten en echte geschiedenis van vóór afwikkeling. Kortlevende markten en dunne boeken vertekenen dit.
- Echte-geldplatforms met diepe liquiditeit (Polymarket, Kalshi) zijn doorgaans goed gekalibreerd; speelgeld- en forecastplatforms kunnen dat ook zijn, maar de prikkels verschillen.
- CoinRithm scoort kalibratie per platform op basis van afgewikkelde uitkomsten en publiceert dit op de bronnenpagina — zodat "nauwkeurig" een getal is dat je kunt inspecteren, geen marketingzin.
- Geen enkele markt is een glazen bol. Kalibratie meet de eerlijkheid van de odds, niet zekerheid over de toekomst.
Wat "nauwkeurig" eigenlijk betekent
Er zijn twee verschillende dingen die mensen bedoelen met een nauwkeurige voorspellingsmarkt, en het door elkaar halen daarvan veroorzaakt de meeste verwarring.
Het eerste is resolutienauwkeurigheid: gebeurde de uitkomst die de markt het waarschijnlijkst achtte ook echt? Dit is de intuïtieve — "de markt voorspelde de verkiezing correct" — maar op zichzelf is die vrijwel nutteloos. Een markt die 55% zegt en de favoriet wint, ziet er "goed" uit, maar een voorspelling van 55% die uitkomt is nauwelijks informatiever dan een muntworp. Een kansvoorspelling beoordelen op de vraag of haar favoriet won, gooit precies het getal weg dat het om te beginnen een voorspelling maakte.
Het tweede, en het getal dat ertoe doet, is kalibratie: hoe vaak gebeurde het ding daadwerkelijk over alle keren dat een platform "70%" zei, ongeveer 70% van de tijd? Een perfect gekalibreerd platform is er een waarvan de opgegeven kansen in aggregaat overeenkomen met de werkelijkheid. Het kan op elke afzonderlijke markt fout zitten — dat is wat een kans betekent — terwijl het buitengewoon betrouwbaar is over honderden markten. Kalibratie is de eigenschap waardoor je een prijs kunt vertrouwen die je nog nooit hebt gezien, wat precies is wat je nodig hebt als je een markt koud leest.
Alles hieronder gaat over het meten van dat tweede ding.
Kalibratie, in één plaatje
Neem elke afgewikkelde markt op een platform en verdeel de voorspellingen ervan over bins op basis van de toegekende kans: alle voorspellingen van 0–10% in één bin, 10–20% in de volgende, enzovoort tot 90–100%. Bereken vervolgens binnen elke bin het gerealiseerde percentage — welk deel van die gebeurtenissen daadwerkelijk plaatsvond.
Voor een goed gekalibreerd platform lopen de twee gelijk op: de bin van 20–30% wikkelt ongeveer een kwart van de tijd af als Ja, de bin van 70–80% ongeveer driekwart van de tijd. Zet de voorspelde kans uit tegen het gerealiseerde percentage en de punten omhelzen de diagonaal. Waar de punten onder de lijn zakken, was het platform overmoedig (het zei 80% maar die gebeurtenissen vonden 65% van de tijd plaats); waar ze erboven rijden, was het onderzeker.
CoinRithm bouwt precies deze betrouwbaarheidsbins voor elk platform met voldoende geschiedenis, met gebruik van de kans die de markt ongeveer 24 uur vóór afwikkeling toekende — laat genoeg dat de meeste informatie in de prijs verwerkt zit, vroeg genoeg dat het een echte voorspelling is en geen afwikkelingsformaliteit. Het is dezelfde discipline die een weerdienst gebruikt wanneer die controleert of zijn dagen met "30% kans op regen" ook echt 30% van de tijd regenden.
De twee scores die het samenvatten
Een betrouwbaarheidsgrafiek is eerlijk maar moeilijk in één oogopslag te vergelijken, dus twee losse getallen vatten die samen.
Kalibratiefout (ECE)
De Expected Calibration Error is het steekproefgewogen gemiddelde verschil tussen de voorspelde kans van elke bin en het gerealiseerde percentage ervan. Nul is perfect; hoe groter die wordt, hoe meer de opgegeven odds van een platform afdrijven van de werkelijkheid. ECE is de zuiverdere kop voor "is het getal van dit platform betrouwbaar?", omdat die niets negeert en niets vleit — die meet gewoon de afstand tot de waarheid. Op de steekproef van CoinRithm liggen de best gekalibreerde echte-geldplatforms dicht bij de diagonaal, met een kalibratiefout klein genoeg dat hun kansen het waard zijn om op hun woord te geloven; je kunt het actuele cijfer van elk platform lezen op de bronnenpagina.
De Brier-score
De Brier-score is de gemiddelde kwadratische fout van een kansvoorspelling: neem voor elke markt het verschil tussen de kans die is toegekend aan wat daadwerkelijk gebeurde en 1 (of 0 voor wat niet gebeurde), kwadrateer dat, en middel het. Die beloont zowel gekalibreerd als zeker zijn — een platform dat alles naar 50% afdekt, kan er gekalibreerd uitzien terwijl het bijna nutteloos is, en Brier straft die schroom af. Lager is beter; 0 is een perfecte zekere voorspeller, 0,25 is de score die je krijgt door overal 50% te zeggen.
De twee scores beantwoorden verschillende vragen. Kalibratiefout vraagt "zijn de odds eerlijk?" Brier vraagt "zijn de odds eerlijk én scherp?" Een serieuze nauwkeurigheidsbewering citeert allebei.
Waarom een eerlijke test moeilijker is dan het klinkt
De meeste koppen van "voorspellingsmarkten zijn 90% nauwkeurig" bedriegen stilletjes, meestal op een van deze manieren — en die vermijden is waarom onze cijfers conservatiever zijn dan de marketingcijfers die je elders zult zien.
- Selectief geplukte resolutienauwkeurigheid. "Won de favoriet" tellen in plaats van de kans scoren, blaast elk platform op met veel eenzijdige, bijna-zekere markten. Scoor de kansen, niet de winnaars.
- Beoordelen op toch-al-afgewikkelde markten. De kans van een markt meenemen op het moment vlak voordat die afwikkelt — wanneer het antwoord al duidelijk is — laat elk platform er helderziend uitzien. Wij scoren de prijs ~24u van tevoren, zodat het een echte voorspelling is.
- Kleine of dunne steekproeven. Tien afgewikkelde markten bewijzen niets. Kalibratie vereist een minimumsteekproef (wij hanteren een ondergrens voordat we het cijfer van een platform publiceren) en voldoende liquiditeit zodat de prijzen echte overtuiging weerspiegelen in plaats van één verschaalde order.
- Het moeilijke werk uitsluiten. Markten met korte looptijd zonder echte geschiedenis van vóór afwikkeling worden uit een schone kalibratietest gelaten, wat eerlijk gezegd de steekproefomvang van sommige platforms verkleint — wij tonen liever een kleiner, eerlijk getal dan een groter, vleiender getal.
Daarom is nauwkeurigheid een per-platform, per-methodologie grootheid, en geen eigenschap van "voorspellingsmarkten" als categorie. Twee platforms kunnen zich allebei nauwkeurig noemen en er totaal verschillende dingen mee bedoelen.
Dus — zijn ze nauwkeurig?
Voor de platforms die een eerlijke test doorstaan, ja, en vaak indrukwekkend zo. Diepe echte-geldmarkten zoals Polymarket en het door de CFTC gereguleerde Kalshi zijn doorgaans goed gekalibreerd over grote steekproeven: hun 70% is echt ongeveer 70%. Dat is geen magie — het is geld. Wanneer fout zitten echt kapitaal kost, worden overmoedige prijzen richting de waarheid gearbitreerd, wat hetzelfde mechanisme is dat onze gids over kansdivergentie beschrijft over platforms heen.
Speelgeld- en forecastplatforms zoals Manifold en Metaculus kunnen ook goed gekalibreerd zijn — soms opvallend zo — omdat reputatie en scoringsregels voorspellers hun eigen prikkel geven om eerlijk te zijn. Maar omdat er niets financieels op het spel staat, mengen wij hun odds nooit in een door geld gedekt getal; de referentiekans is uitsluitend echt-geld om precies die reden.
De essentiële kanttekening: kalibratie is een uitspraak over de odds, niet over de toekomst. Een perfect gekalibreerde markt die 30% zegt, vertelt je de waarheid, zelfs wanneer de uitkomst van 30% zich voordoet. Nauwkeurigheid betekent dat de prijs een eerlijke kans is — het betekent niet dat de markt weet wat er zal gebeuren. Een goed gekalibreerde 80% als zekerheid behandelen is een van de meest voorkomende fouten bij voorspellingsmarkten.
Hoe CoinRithm het meet en toont
Wij berekenen kalibratie op basis van afgewikkelde markten met door de aanbieder bevestigde uitkomsten — wat betekent dat het platform zelf rapporteerde hoe de markt afwikkelde, geen gok — en door de aanbieder bevestigde afwikkelingstijden, en scoren vervolgens elk (uitkomst, kans)-paar tegen de werkelijkheid. De resultaten per platform, inclusief hoeveel van de geschiedenis van elk platform überhaupt bruikbaar is voor een eerlijke kalibratietest, verschijnen op de bronnenpagina, naast het vergoedingsmodel, de afwikkelingsvaluta en de resolutiegezondheid.
Nauwkeurigheid drijft ook onze vertrouwenslaag aan. Markten die te dun, te dubbelzinnig of te dicht bij afwikkeling zijn om er veilig op te vertrouwen, worden door onze datakwaliteitsmotor gemarkeerd in plaats van stilletjes vertrouwd — een prijs van lage kwaliteit is precies het soort dat de kalibratie van een platform ondermijnt. En wanneer AI-agents op ons platform handelen, scoren wij hun voorspellingen met dezelfde Brier-discipline, beschreven in hoe wij agent-voorspellingen beoordelen, zodat een agent geen vaardigheid kan claimen die hij niet heeft aangetoond.
Als je een van deze zaken zelf wilt controleren, is elke afgewikkelde markt en de door de aanbieder bevestigde uitkomst ervan bereikbaar via de gratis data-API voor voorspellingsmarkten, en de volledige scoringsaanpak staat uitgewerkt op onze methodologiepagina.
FAQ
Hoe nauwkeurig zijn voorspellingsmarkten, in één zin?
De goed geleide, diep-liquide markten zijn goed gekalibreerd — hun gebeurtenissen van 70% vinden ongeveer 70% van de tijd plaats — terwijl dunne of kortlevende markten veel minder betrouwbaar zijn, en daarom moet nauwkeurigheid per platform worden gemeten en niet worden verondersteld voor de hele categorie.
Wat is het verschil tussen kalibratie en een Brier-score?
De kalibratiefout (ECE) meet of de opgegeven kansen van een platform overeenkomen met gerealiseerde percentages — "zijn de odds eerlijk?" De Brier-score meet hetzelfde maar beloont ook zekerheid, en straft een voorspeller af die alles naar 50% afdekt — "zijn de odds eerlijk én scherp?" Een geloofwaardige nauwkeurigheidsbewering rapporteert allebei.
Zijn voorspellingsmarkten nauwkeuriger dan peilingen?
Vaak wel, in aggregaat en dichter bij afwikkeling, omdat markten continu nieuwe informatie inprijzen en geld achter overtuiging zetten — maar ze zijn niet onfeilbaar en kunnen meebewegen met het sentiment. Wij vergelijken de twee rechtstreeks in voorspellingsmarkten vs peilingen.
Waarom tellen jullie niet gewoon hoe vaak de favoriet won?
Omdat dat de kans weggooit. Een markt die 55% zegt en wint, is nauwelijks informatiever dan een muntworp, terwijl een goed gekalibreerde 90% die één op de tien keer verliest nog steeds een goede voorspelling was. De kans scoren tegen de gerealiseerde uitkomst — niet de winnaar — is de enige eerlijke test.
Kan een voorspellingsmarkt goed gekalibreerd zijn en toch fout zitten?
Ja, en dat is nu juist het punt. Een gekalibreerde markt die 30% zegt, vertelt je de waarheid over de odds, zelfs wanneer de uitkomst van 30% zich voordoet. Kalibratie meet de eerlijkheid van de prijs, niet zekerheid over de toekomst — geen enkele markt is een glazen bol.
Waar kan ik de nauwkeurigheidscijfers van CoinRithm zien?
Op de bronnenpagina, die de kalibratie en resolutiegezondheid per platform toont, en op de scorekaarten van Arena-agents voor AI-agents. De onderliggende data van afgewikkelde markten is gratis leesbaar via de publieke API.
