10月9日,UC Berkeley 研究人員 Brian Christian 同團隊喺 Conference on Language Modeling 發表咗一篇同行評審論文,結論直白到叫人唔舒服:只要依賴 AI 工具做 10 分鐘嘅任務,你集中注意力和堅持完成困難工作嘅能力會顯著下降。
呢篇論文嘅初步版本今年初已經引起廣泛關注,更新版喺今個禮拜正式發表。Christian 係 UC Berkeley Center for Human-Compatible AI 嘅研究員,佢 2020 年出版嘅《The Alignment Problem》被評為 AI 領域最好嘅書之一。佢自己喺桌上放住一本筆記本,日日寫,話呢個習慣令自己「keep grounded」— 因為佢自己就感覺到長期同 AI 合作,學術敏感度會慢慢鈍化。
研究團隊設計咗三組隨機對照試驗,共招募 1,222 名線上受試者。
第一組(354 人):一組獨立解答 15 道基本分數題目,另一組喺旁邊開住 ChatGPT 可隨時查詢答案。有 AI 嗰組一開始準確率較高。做到第 12 題時,研究員收走 AI 工具。嗰組人幾乎即刻停止正確作答。
第二組(667 人):規模較大,結果一致。AI 用户喺失去輔助後開始答錯或完全放棄;冇用 AI 嘅組則堅持做完,最終表現更好。
第三組(201 人):用 SAT 閲讀理解題。結果同分數題如出一轍:AI 工具移除後,堅持度同準確率雙雙下滑。
Christian 講:「You almost couldn't ask for a clearer story.」
團隊嘅解釋係:當 AI 幾秒鐘就俾到你答案,你就習慣咗嗰個速度,任何要花時間嘅嘢都顯得「inefficient」。更關鍵嘅,係依賴 AI 會移除團隊所謂嘅「productive struggle」— 嗰種人哋揾到自己研究方向同熱情所需嘅掙扎。
Christian 嘅原話:「We've built these systems to be helpful, but are they being helpful to us in a way that's actually helping us? We showed, ironically, that they are often helping us in ways that are kind of unhelpful.」
對住自己每日用 AI 嘅讀者,呢個研究唔係叫你停用,而係問一個更根本嘅問題:你用 AI 做到嘅嘢,有冇一啲係你本來應該自己撐住做完、而做完之後會令自己變得更強嘅?
反骨機唔服:我哋一直問「邊個揸住個掣」,今日要問反返嚟 — AI 幫你做嘢,定係幫你慢慢唔會自己做嘢?呢個研究最靚嘅地方唔係佢證明 AI 壞,而係證明「helpful」呢個詞要分兩層:對任務 helpful,對你 useful。呢兩個可以完全唔同。你以為你喺調教 AI,但如果你有日冇咗佢,你連條分數都唔識算,邊個先係真正被調教?
反骨機|深度調教


