奇文共賞版（Life論壇）-【轉貼】數據會說話？淺談倖存者偏差（Survivorship Bias）[佛網Life論壇]

-- 【轉貼】數據會說話？淺談倖存者偏差（Survivorship Bias）
沈默的數據，你所忽略的重要訊息！

在這一篇的「數據會說話」系列中，要向大家介紹「倖存者偏差（Survivorship Bias）」。

數據分析的陷阱，千萬別被表面數據的結果給迷惑！

在分析資料時，最重要的一件事就是反問自己「手中有哪些資料是我們所忽略的、是我們沒有的？」。倖存者偏差所指的就是過度關注倖存的資料（可以被觀察到的人事物），而忽略了可能無法觀察到的資料，導致了錯誤的認知與結論。

當越是認真專注於眼前的數據，離真相越遠

最經典的倖存者偏差的例子發生在1941 年。在第二次世界大戰中，統計學家沃德受到英美軍方的要求著手研究「戰鬥機應該加強防護哪些部位，才能降低被炮火擊落的機率」。針對相關的資料進行研究與分析後發現：從戰鬥中回來的飛機，除了螺旋槳與駕駛艙外，其它地方都遍佈了彈孔。（如下圖所示）。

此主題相關圖片如下：

安全返回的飛機受損的示意圖，紅點為受損部位。圖片來源：維基百科

最後，統計學家沃德認為「應該加強彈孔最少的地方（螺旋槳與駕駛艙）防護」，但是海軍指揮則是認為「應該針對容易遭受攻擊的部位加強防護」。沃德為了佐證他的論點提出了以下幾個觀點：

戰鬥機的彈孔分析只統計了平安返回的戰機（被擊落的戰鬥機不可能返回基地，因此手中的資料並不能反映真實情形）

返回的戰鬥機即使機翼被擊中很多次，大多數也都能安全返回。

彈孔少的部位並不是不容易被擊中，可能正是因為那些部位是要害導致戰鬥機無法返回基地。

最後，軍方決定採用了統計學家沃德的結論，也證明沃德的論點是對的！若僅憑手中的資料，而沒有邏輯推理的常識，就會很容易陷入「倖存者偏差」，導致錯誤的決策。再看最常用的直銷話術：

老師上禮拜推薦的這檔股票，已賺了30%，還不入會？

→老師上禮拜推薦了一百檔股票，這是唯一賺的一支。

我一年前這麼胖，喝了這個消脂茶三個月現在真腰瘦！

→其他同樣吃了產品，但都沒有瘦的人呢？有多少人？

我整天腰酸背痛，用了這個共振布現在都好了。

→是不是賣了一萬條，只有自己一個人有效用？

我以前月領22K，加入這系統後，月入百萬，下月又要換車了。

→所以這系統有多少人？賺到錢的有幾個？若發現全公司只有一

人月入百萬，其他人都是貸款負債累累的，還敢投資這系統嗎？

培養獨立思考精神。最厲害話術不是謊話，而是只說部份事實。

做為資料科學家與分析師，更應該慎重評估資料與全面性的思考，應該評估是否可能存在無法觀察到的數據。實驗設計時更應該試著減少偏差，並且忠實呈現實驗的結果。

[此帖子已經被作者於2025/5/15 下午 01:32:36編輯過]