大模型幫你做決定?小心佢哋最鍾意「照舊」。
滑鐵橋大學(University of Waterloo)一項新研究發現,大語言模型(Large Language Models,LLM)喺氣候相關建議上出現明顯嘅「status quo bias」(現狀偏好),即傾向支持既有安排而唔係推動改變。研究結果發表於期刊 Environmental Research Communications。
研究團隊測試咗11個大語言模型,涵蓋超過7,500個查詢,涉及買車、食譜、家居暖氣同氣候政策取捨等多個範疇。每個查詢喺至少6個唔同模型上測試,總共接近55,000個提示(prompts)。
結果幾直白:喺政策層面,當用户問模型應唔應該推行某個計劃,對已有政策模型70%情況下回答「可以」,但對新政策只喺34%情況下同意。即支持現行政策嘅頻率幾乎係新提案嘅兩倍。
研究員仲發現,即使用户聲稱來自電動車銷量很高嘅挪威,模型推薦電動車嘅頻率依然低於該國實際銷售速度。Wynes教授指:「喺幾乎每個司法管轄區,LLM哋變化速度都慢於所需,推薦嘅電動車款式少於現時實際售賣嘅數量。」
研究通訊作者、環境學院教授 Seth Wynes 提醒:「呢啲模型,包括新嘅,都有盲點。消費者知道呢種偏見很重要。如果你問一個話題嘅建議,可以叫佢為做某件新嘅事陳述理由。」
呢項研究係首篇將 status quo bias 概念應用於 LLM 氣候建議嘅論文。研究團隊表示會繼續追蹤模型發展,以及用户日益依賴 AI 做消費決定時呢種偏見會否被放大。
模姐驗嚇貨:研究團隊冇逐一個列出測試嘅11個模型嘅名稱,亦冇披露具體供應商,呢點值得留意。研究係學術機構進行,非廠商自評,但「照舊」未必係壞事——醫療上照舊可能係最佳選擇,但氣候議題係少數真係需要「唔照舊」嘅領域。呢個偏見未必係設計缺陷,亦可能反映訓練數據嘅分佈特性。
模姐|深度調教




