西西河

主题:【原创】预言帝培养指南 -- 淮夷

共:💬61 🌺727 🌵1
全看分页树展 · 主题 跟帖
家园 Tetlock写过一本书详述专家预测实验

您提了几个挺好的问题,我尝试回应下:

1. 关于大数定律失效:284个专家也许并不是一个足以制造“群体智慧”的数量。在预测未来方面,准确度更好的是一些“预言交易市场”,有成千上万的市场参与者发挥独立决策并制造大数效应(可参见我写的《群众的智慧》)。

2.实验设计机制:1)一方面很难设计出完全独立的预测目标,另一方面一个人在他的专业领域做预测会存在很高的自相关性,所以您说的对,一错就错一串。2)但这实验的机制还是尽量遵循了统计原则。譬如有一专家预测事件A有60%的发生概率,那么您不但要看A本身情况,还要把该专家预测的其他近似60%概率事件(事件B,事件C...)都找出来,然后看一看是否事件的整体出现概率接近60%,或者偏差有多少。这就是一个“calibration"的过程,可以剔除对单一事件碰运气的乱猜。另外,如果一个专家给出绝对的100%概率或者0%概率,而事件如其所测,Tetlock会分配额外的加分,这也是一种公平算法。

3.错的特别离谱是真正专家:同意,尤其是特别深入某一领域的人士,因为他的固执己见可能额外严重,从而一错再错。这类专家在Tetlok的比喻中是"刺猬"型的,观点尖锐,权威感十足。还有一种"狐狸"型专家更愿意吸纳多方意见和调整预测,所以准确率略好,但是不被普通人追捧,成不了预言帝。

4. 为何预测未来出错:预测未来的出错可能是不可避免的,不管是否专家。预测对象皆属政经大势这种复杂性系统的问题,我的看法更接近于不可知论。不可知论的话题跟预言帝无关,所以就不展开说了。

全看分页树展 · 主题 跟帖


有趣有益,互惠互利;开阔视野,博采众长。
虚拟的网络,真实的人。天南地北客,相逢皆朋友

Copyright © cchere 西西河