预测市场应该给你概率,而不是结果。现实世界是不确定的,而 @Polymarket 用概率量化这种不确定性。 所以如果不是“Polymarket 预测了 X,而 X 发生/没有发生”——如果它只是输出概率——你如何衡量 Polymarket 实际上有多具预测性? 统计学家已经有一个工具来做到这一点,叫做 Brier Score。Brier Score 基本上告诉你:“当你说某个结果发生的可能性是 ~60% 时,这些事情是否在 60% 的时间内发生?”10% 和 90% 也是如此。 这就是 Polymarket 的情况,@Dune 的仪表板由 @alexmccullaaa 提供 👇 对于 Brier Score,越小越好。低于 0.1 通常是非常好的。(体育博彩的分数大约在 0.2 左右)。Polymarket 的 Brier Score 是 0.056,这意味着它在揭示正确概率方面非常准确。 结论:Polymarket 非常准确,但这意味着什么以及如何衡量是微妙的。
wishful_cynic
wishful_cynic10月17日 13:17
我认为人们对预测市场的“准确性”感到非常困惑。 一个典型的例子是美国选举。不,polymarket并没有“预测特朗普获胜”。 它比其他来源更准确(!)。为了声称你预测了某件事,你不能说“特朗普有60%的可能性获胜”,你必须说“特朗普会获胜”(或者有一个非常接近100%的声明,而60%显然不是,它仍然更像是抛硬币)。
附录——从技术上讲,我在 OP 中描述的内容是校准,而 Brier 分数还衡量了锐度(即模型是否在做出自信的预测,或者在采取保守策略以获得更好的分数)。 对于数学爱好者,Brier 分数是通过预测概率的均方误差(MSE)计算得出的。
135.15K