Superforecasting 超級預測

俗話說千金難買早知道。對於S&P前百大的公司來說，更是千億都可能願意砸錢下去買的資訊。說到預測未來，以前最愛看的電影系列之一的Back to the Future，完完全全展示了穿越時空可以濫用的種種機會，就好比說反派角色透過知道體育賽事結果回到過往去，逢賭必贏，打造了前所未見的財富。

如果今天送你一本雜誌跟你講下一次樂透中獎的號碼，它價值多少？如果換一個角度，有一本書能跟你提前預知未來十年所有的天災人禍，大選結果，社會、環境，跟生活息息相關的細節，它能造福或貽禍多少人？

去年年中開始，我的工作逐漸從財務報告轉變成預測分析。對於任何大公司來講，看似很簡單的東西都會因為層層的分工而降低能見度。一但全球化之後更是在不同法規、國家、語言、時區、制度、文化等隔閡中提高預測難度。

舉例來說，過去八個月經常被上至CFO、下至老闆問到如下的問題。

「川普的美中關稅如果過了之後對本季的利潤、銷售量影響是多少？」

「corona virus 對於本季還有下季的利潤影響分別為何？全球需求總共影響層面多深、半導體市值波動範圍多廣？」

「從競爭分析的角度去看，量化每上升或下降1%的市佔率對於未來五年的影響。」

…

以上都是好問題，也都是該問的問題。但在資訊不完整、超級龐大的雜訊當中要抽絲剝繭的找出答案何其困難。豈止是一句「大哉問」可以一言以蔽之？除了預測分析之外，真正有價值的都在管理決策，因此第一步是分析不同的選擇結果，第二步是把提案送到管理階層去並幫他們做出最好的決定。聽起來像是廢話，但是這兩步真的無比困難，因為做決定的人離資料遠，連資料近的人沒有全面的了解。

有鑒於這麼重要的問題無法輕易取得答案，大老闆號召了公司裡面一個特別的小組，準確來說是一支內部顧問團隊來協助我們提昇預測額度能力。

過去五個月裡我們花了非常多時間反覆建立一套有系統的分析模型，下面會討論比較technical一點的細節。主要協助我們的一個分析師J以前曾在美國CIA情報局上班，他跟我介紹了一本很推的書叫做superforecasting。裡面探討了許多這邊要介紹的觀念。

故事是有一群人來自各行各業，一起參與the Good Judgment Project，他們並稱叫做 Superforecasters，因為他們合起來預測不同event的能力超過美國三大情報局 （FBI, CIA, NSA），書中提到一個關鍵的概念是我們對於預測準確率有非常大的誤解。如果今天天氣預報跟你說有80%的機率會降雨，結果一天下來天氣大好，我們可能極度懷疑氣象預報者的專業能力，認為之後的預測都可以直接扔進垃圾桶。這樣的謬誤來自於我們不懂也不擅長用統計的指標描述實情。如果要看一個氣象預報家的分析到底品質好不好，你需要大量的時間來推斷。

以剛剛的例子來講，十次裡面如果氣象預報說80%降雨，而有八次下雨而兩次沒有，那麼這個氣象預報可以說是神準。因為他的指標成功的告訴你說有八成的機率會降雨。我們一般人最不喜歡uncertainty，每個人都愛問黑與白的問題- 「我等下要還是不要帶傘出門？」「這支股票買還是不買？」「我該換還是不該換工作？」