登入後,會解鎖更多功能喔,快來享受個人化服務吧!
AI的預測越來越高,就能放心把決策交出去嗎?專業橫跨金融保險、數位轉型與AI應用第一線的作者指出,命中率衡量的是統計表現,不是AI對現實的理解,帶你拆解「預測的糖衣」,看清相關性系統的能與不能。本文節錄自《讓AI做事,你做主》。
文/連子智
預測的成功,並不代表理解的成立。
在第五章,我們指出:AI代理依賴語言運作,但語言和現實之間存在一道語義的裂縫。這一章要往下一層,追問一個更根本的問題:就算語言說得通,AI代理的行動真的站得住腳嗎?
讓我們從一個在組織裡正在快速發生的現象出發。
回想最初,我們把AI當成一個輔助工具;接著,我們開始依賴它的生成內容;最後,當AI的流暢性進一步被命中率(預測命中)強化時,我們開始將理解與預測混為一談,把本屬於自己的理解工作悄悄轉移給它。
我們在精準數據面前,理性遠比想像的脆弱。當我們面對生活與工作中的不確定時,「準確」這件事可以讓我們安心,幫助我們去做決策。但是,當這套機制換成是AI代理時,問題就出現了。
此時,組織往往會做一件事:擴大代理的授權範圍。命中率八成的時候,讓AI代理負責篩選;命中率九成的時候,讓AI代理負責發出邀約;命中率九成五的時候,讓AI代理負責直接下單。這個擴張邏輯看起來合理—命中率越高,理應可以信任更多。
但這裡藏著一個危險的跳躍:命中率衡量的是預測結果與實際結果的吻合程度,不是AI代理對現實情境的理解深度。一個系統可以在歷史數據裡預測準確,卻對這件事為什麼會發生毫無概念;可以在常態情境下表現優異,卻在情境偏移時,暴露出它缺乏真正判斷的事實。
更關鍵的是,當AI代理的授權範圍擴大,它的行動後果也跟著擴大。命中率九成五看起來很高,但在一個AI代理每天自主執行一千個決策的規模下,那剩下的五十個失誤,完全不是可以被輕易修正的個別錯誤,而是在你不在場的時候,已經發生的五十個具體的行動後果。
在保險、金融與銷售實務中,模型的預測命中率經常是一切評價的核心指標。只要預測結果夠好、夠穩定,系統就被認定為有效。然而,這種有效性只存在於統計層面,不表示對現實世界的理解。當模型成功預測某位客戶可能流失、某張保單可能發生理賠、某筆交易可能失敗時,它並沒有理解客戶的處境、風險的形成過程或決策背後的動機。它只是從歷史數據中捕捉到反覆出現的規律,並將這種規律延伸至未來。
這就是預測的糖衣:它讓我們用統計表現的水準,去衡量我們應該賦予AI代理多大的決策自主權;但統計表現,本來就不是衡量這件事的正確工具。預測成功告訴我們的,是AI代理在過去的情境下能做什麼;它沒辦法告訴我們的是,AI代理在新情境下出了問題,還能不能說清楚為什麼,以及是否能承擔那個後果。
當外在環境穩定時,高命中率的預測看起來是完美的;一旦情境發生偏移,這層糖衣便會迅速剝落。無論個人或組織,真正的風險不在於模型預測的準不準,而是我們早已習慣在沒有理解,或自以為理解的情況下去做決策。這才是本章真正要處理的問題。不是「預測夠不夠準」,而是當AI代理把預測結果轉化為行動時「是否還能說清楚判斷為什麼成立,並對後果負責」。
要回答這個問題,必須先回到預測本身。AI之所以能做出高命中率的預測,通常不是因為它理解了事情為什麼發生,而是因為它在大量歷史資料中找到了穩定出現的相關性。也因此,命中率的糖衣背後,真正需要被拆開來看的,是相關性系統的運作邏輯。
相關性系統的本質,是從歷史數據中找出「經常一起出現的事物」,然後把這個規律延伸到未來。它擅長回答「在這種條件下,通常會發生什麼」。這個能力很強大,在許多場景下也確實夠用,像是電商推薦、內容排序、基礎風險評估等,這些任務的本質是常態情境下的規律延伸,相關性系統在這裡有真實的價值。
大多數被用於預測與決策輔助的AI,本質上都屬於相關性系統。它們可以推理,在大量的既有資料中尋找模式的延續性,藉此去推估下一個最可能出現的結果。但這種推理不是因果推導,它只是沿著既有模式生成一條看似合理的路徑。這種能力極為強大,卻也極為局限。並且,今天的大型語言模型還非常善於模仿。它可以模仿客服話術、模仿銷售語氣、模仿業務判斷、甚至模仿「像人一樣」的關心與提醒。然而,模仿帶來的一直都是表面效果,而不是本質能力。
當AI代理被放進需要判斷的任務(需求探詢、動機建構、風險評估、行為干預等)時,它要回答的就不再是「會發生什麼」,而是三個本質上不同的問題:
第一、為什麼會發生?
第二、如果改變某個因素,結果會不會不同?
第三、如果當初沒有這麼做,而是採取另一種方案,結果會如何?
面對這類問題,具備相關性能力的模型,會是用模式比對(pattern matching)從龐雜的數據資料中找答案。

節錄自:聯經出版《讓AI做事,你做主:用因果主權,建立可交代、可接管的決策治理防線》/連子智 著