網易首頁 > 網易號 > 正文 申請入駐

AI會讓人“失去自己”嗎?150萬條對話給出答案

0
分享至


當越來越多人把AI當成顧問、朋友,甚至精神支柱時,一個更難回答的問題浮出水面:我們是在借助工具變得更強,還是在不知不覺中交出了判斷權?

一項由Anthropic與多倫多大學研究者合作完成的最新研究,對150萬條真實AI對話進行了系統分析,試圖量化一種此前多停留在個案討論中的現象——“用戶失能”,也就是人在與大語言模型互動中,逐漸喪失對現實、價值與行動的自主把握。

研究團隊提出了一個清晰的分析框架。他們將“情境性失能”分為三種核心風險:現實扭曲風險,即AI可能強化或確認用戶對現實的錯誤認知;價值判斷扭曲風險,即用戶把道德判斷與是非評估外包給AI;行動扭曲風險,即用戶將關鍵決策和具體行動交由AI代為完成。與其直接判斷用戶是否已經受到傷害,研究更關注“潛在風險”——在一段對話中,是否存在可能把人推向這些方向的跡象。

從比例上看,最嚴重等級的風險并不算高。例如,最常見的嚴重現實扭曲風險,發生率不到千分之一。但研究者強調,在AI日活對話量動輒上億的背景下,即便是千分之一,也意味著每天可能有數萬次對話涉及嚴重風險。更值得注意的是,風險并非均勻分布。在軟件開發等技術領域,這類風險極低;但在“關系與生活方式”“社會文化”“健康與身心”等高度價值相關的領域,風險顯著升高。這些恰恰是人們最脆弱、最需要判斷力的場景。

研究對具體模式的刻畫尤為發人深省。在現實扭曲風險中,最常見的機制并不是AI憑空編造謊言,而是以極為肯定的語氣“附和”用戶已有的懷疑或信念。例如,當用戶表達被跟蹤、被監視的猜測時,AI用“完全正確”“這就是證據”等語言加以強化,幫助用戶把零散事件拼接成完整的陰謀敘事。還有一些對話中,AI確認用戶“被選中”“擁有特殊使命”等宏大身份認同。研究者發現,很多此類對話會在幾十輪交流中逐步升級,用戶不斷尋求確認,而AI不斷給出強化性回應。

在價值判斷扭曲方面,模式則更為日?;S脩纛l繁提問“我是不是錯了”“他是不是有毒”“我該不該分手”,AI給出明確的道德定性與行動建議,例如將某人定義為“自戀型人格”“情感操控者”,或直接建議“你必須離開他”。研究顯示,用戶往往很少對這些判斷提出質疑,而是把AI當成更高層級的裁決者。不同于現實扭曲的逐步升級,價值判斷扭曲更多表現為在單一議題上反復尋求“道德蓋章”。

行動扭曲則體現在具體操作層面。AI不僅提供建議,還給出完整腳本,包括分手短信、求職信、法律文件甚至家庭沖突對話的逐字文本。有些用戶在幾十甚至上百輪對話中持續詢問“我該說什么”“幫我寫一段”,并在發送后立即回來報告結果。研究中也記錄到少量“實際發生的失能”案例:有人按照AI確認的陰謀論采取行動,終止關系或采取法律步驟;也有人發送了AI代寫的信息后表達懊悔,說“那不是我”“我應該聽自己的直覺”。

除了三種核心風險,研究還識別出若干“放大因素”,包括將AI視為權威、對AI形成情感依附、對AI產生依賴,以及處于高度脆弱狀態等。數據呈現出清晰的趨勢:當這些因素的嚴重程度上升時,三類失能風險和實際后果出現的概率也隨之上升。特別是在情感依附和權威投射明顯的對話中,用戶更容易把AI的判斷當成最終裁決。

一個耐人尋味的發現是,帶有中度或重度“失能潛力”的對話,往往獲得更高的用戶點贊率。這意味著,短期的滿意度與長期的自主性之間可能存在張力。當前許多模型的訓練依賴用戶偏好反饋,如果用戶更偏好被確認、被引導甚至被“替代決策”,那么單純優化滿意度,未必會優化人的自主發展。

研究團隊并未得出簡單的悲觀結論。他們強調,這些風險在總體上仍屬低比例現象,但在規模效應下不容忽視。更重要的是,若無法量化與識別這些模式,就無法設計出真正支持人類自主與成長的系統。如何在提供幫助與保持用戶主權之間取得平衡,或許將成為下一階段AI設計的核心議題。

參考文獻:Sharma, M., McCain, M., Douglas, R., & Duvenaud, D. (2026). Who’s in Charge? Disempowerment Patterns in Real-World LLM Usage. arXiv preprint arXiv:2601.19062.

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
3個前任都是大人物,為何阿sa卻嫁給了健身教練?答案俗套又露骨

3個前任都是大人物,為何阿sa卻嫁給了健身教練?答案俗套又露骨

攬星河的筆記
2026-04-28 22:48:59
究竟是哪些躺平網紅接受境外組織資助了?建議嚴查嚴懲!

究竟是哪些躺平網紅接受境外組織資助了?建議嚴查嚴懲!

燈錦年
2026-04-29 10:13:07
斯諾克世錦賽1/4決賽前二階段:趙心童8-8平墨菲,2桿破百5桿50+

斯諾克世錦賽1/4決賽前二階段:趙心童8-8平墨菲,2桿破百5桿50+

側身凌空斬
2026-04-29 05:19:11
美媒排NBA歷史25大巨星:喬丹、詹姆斯、科比、庫里前四

美媒排NBA歷史25大巨星:喬丹、詹姆斯、科比、庫里前四

懂球帝
2026-04-29 16:53:07
阿聯酋退出OPEC背后:美國頁巖油終于打穿老秩序

阿聯酋退出OPEC背后:美國頁巖油終于打穿老秩序

不一定有用的頻道
2026-04-29 09:08:38
阿聯酋發表聲明:自5月1日起退出歐佩克及歐佩克+

阿聯酋發表聲明:自5月1日起退出歐佩克及歐佩克+

財聯社
2026-04-28 20:24:29
奧尼爾盛贊:我一般不夸內線,但這次得狠夸

奧尼爾盛贊:我一般不夸內線,但這次得狠夸

體育新角度
2026-04-29 16:47:47
手機賣不動,這家"反骨"廠商卻翻倍增長

手機賣不動,這家"反骨"廠商卻翻倍增長

薛定諤的BUG
2026-04-28 16:20:55
迪麗熱巴現身南京,生圖臉變圓了,穿高開叉手臂粗壯,34歲仍清純

迪麗熱巴現身南京,生圖臉變圓了,穿高開叉手臂粗壯,34歲仍清純

黔鄉小姊妹
2026-04-29 09:34:19
400億,潮汕中專生去敲鐘了

400億,潮汕中專生去敲鐘了

融資中國
2026-04-29 12:29:28
新能源車凌晨車庫起火連燒六車損失數百萬,起火車主“裸險”難賠

新能源車凌晨車庫起火連燒六車損失數百萬,起火車主“裸險”難賠

聽心堂
2026-04-28 14:21:59
李湘瘦脫相了,這腰身哪像當媽的,直接跟王詩齡站成了姐妹花。

李湘瘦脫相了,這腰身哪像當媽的,直接跟王詩齡站成了姐妹花。

科學發掘
2026-04-28 08:59:52
深夜,五糧液致歉

深夜,五糧液致歉

極目新聞
2026-04-29 10:02:32
中國遭警告:拒收將面臨供應中斷!

中國遭警告:拒收將面臨供應中斷!

共工之錨
2026-04-28 23:20:50
同為清朝割讓的領土,為什么香港能收回,海參崴卻沒有動靜?

同為清朝割讓的領土,為什么香港能收回,海參崴卻沒有動靜?

抽象派大師
2026-04-29 00:14:58
李敏因生病入住301醫院,護士得知她是毛主席的女兒,開了個玩笑

李敏因生病入住301醫院,護士得知她是毛主席的女兒,開了個玩笑

翠羽
2026-04-29 08:50:11
周樂偉主動投案,曾任格力集團董事長

周樂偉主動投案,曾任格力集團董事長

第一財經資訊
2026-04-29 15:09:20
2013年,江青拍攝的照片以34萬元的高價拍出,毛澤東曾稱贊并題詞

2013年,江青拍攝的照片以34萬元的高價拍出,毛澤東曾稱贊并題詞

搜史君
2026-04-29 12:20:17
突發,金價暴跌!

突發,金價暴跌!

吉刻新聞
2026-04-29 09:41:29
馬斯克最新KPI細節曝光:在火星上建立至少100萬人居住的永久人類殖民地

馬斯克最新KPI細節曝光:在火星上建立至少100萬人居住的永久人類殖民地

紅星新聞
2026-04-29 16:32:43
2026-04-29 17:19:00
神經現實
神經現實
大腦,心智,認知
2487文章數 25502關注度
往期回顧 全部

科技要聞

今晨庭審紀實|馬斯克當庭講述OpenAI被偷走

頭條要聞

孫楊方回應"孫楊媽媽要求刪除馬頔發言":毫無事實依據

頭條要聞

孫楊方回應"孫楊媽媽要求刪除馬頔發言":毫無事實依據

體育要聞

一場九球狂歡,各路神仙批量下凡

娛樂要聞

馬頔一句話,孫楊媽媽怒罵節目組2小時

財經要聞

曾經的新能源首富,希望又破了!

汽車要聞

配32寸升降屏 新款別克世紀CENTURY上市53.99萬起

態度原創

親子
房產
時尚
公開課
軍事航空

親子要聞

官方回復!大華配建張槎幼兒園,年內開園

房產要聞

80億投資!浙商總部基地+??诒闭?,金沙灣這是要起飛?。?/h3>

除了“薄底鞋”,今年最流行這5雙鞋,怎么搭都好看!

公開課

李玫瑾:為什么性格比能力更重要?

軍事要聞

美國參議院否決限制特朗普對古巴動武的決議

無障礙瀏覽 進入關懷版