超級預測者
中國會攻打台灣嗎?如果會,何時?又如何進攻呢?美國半年後的經濟情況將會如何?股市又會如何?人工智能未來會如何影響就業市場?明天的足球賽哪支球隊會勝出?⋯⋯預測是很有市場的,人們經常想知道未來會發生什麼事情,亦有不少人以各種方法大膽地作出預測,例如股市「專家」的預測。不過,這些預測其實有很多問題存在(譬如語言含混歧義致使難以否證的問題),是很值得質疑的。
由Philip E. Tetlock(和Dan Gardner)所寫的《Superforecasting: The Art and Science of Prediction》是報告一些開創性研究的普及著作,當中介紹了相關研究所確立的「超級預測者」(Superforecaster)的觀念,指的是在社會性預測方面(如地緣政治、金融經濟所涉及的那類社會性的預測,而非自然科學如物理學那種基於精確自然定律的預測),有些人顯著地表現了非凡的能力,值得分析和學習當中的方法和竅妙。
Tetlock的研究的緣起是和美國的情報部門,the Intelligence Advanced Research Projects Activity (IARPA),所舉辦的一個預測比賽有關的。為了要提昇美國的情報質素,當中包括預測世界政經事件的準確度,於2011-2015年期間IARPA主辦了一個有五支隊伍參加的預測比賽。在這四年裡,IARPA陸續提出了接近五百條關於世界事務的預測問題,而五支隊伍總共貢獻了超過一百萬個的預測(因隨著時間推移和資訊變化,每條問題的先前答案可不斷被修改,直到時限終結,故此每條問題亦涉很多個別預測),以供分析硏究。Tetlock的隊伍,名為the Good Judgment Project(GJP),最終取得了完勝:
In year 1, GJP beat the official control group by 60%. In year 2, we beat the control group by 78%. GJP also beat its university-affiliated competitors, including the University of Michigan and MIT, by hefty margins, from 30% to 70%, and even outperformed professional intelligence analysts with access to classified data. After two years, GJP was doing so much better than its academic competitors that IARPA dropped the other teams. (《Superforecasting》, Chapter 1)
確實是可觀的佳績——不但清脆利落地擊敗了MIT的隊伍,還勝過有機密資料的專業情報分析員!可以預期,GJP引起了相當的關注。
那麼,超級預測者有何特質呢?又如何可促進自己的預測能力呢?有興趣的讀者可自行閲讀有趣具啟發性的《Superforecasting》,或可先看一下以下訪問Tetlock的視頻:
最後一提,假如有更深的興趣,還可以了解一下Good Judgment Inc和Forecasting Research Institute,它們分別是GJP的科學成果所衍生出來的,提供預測能力訓練的公司和深化研究預測能力的研究機構。