无主之地2配置高吗|看真人裸体BBBBB|秋草莓丝瓜黄瓜榴莲色多多|真人強奷112分钟|精品一卡2卡3卡四卡新区|日本成人深夜苍井空|八十年代动画片

網易首頁 > 網易號 > 正文 申請入駐

重賞之下必有勇夫的科學依據找到了:《Science》發現超級大獎勵可“開掛”學習,多巴胺是幕后功臣

0
分享至


來源:生物學報

長久以來,神經科學和人工智能領域有一個根深蒂固的共識:動物的學習效率主要取決于“學習率”這個固有參數,而與獎勵本身的大小關系不大。因此,為了獲得足夠多的訓練數據,實驗室中通常給予動物極微小的獎勵(如一小滴水)。2026年5月21日,霍華德·休斯醫學研究所Luke T. Coddington團隊(Sheng Gong為第一作者)在Science在線發表題為“Reward magnitude determines reinforcement learning efficiency”的研究論文,該研究徹底挑戰了這一傳統,發現將獎勵幅度提高一兩個數量級,能使小鼠的學習效率飆升十倍以上。其核心機制在于,更大的獎勵能引發大腦中多巴胺更持久、更強的釋放,而這直接充當了學習的“加速器”。這項研究不僅揭示了多巴胺調節學習的新機制,也表明整個領域可能長期低估了動物的學習能力,并使用了“次優”的訓練策略。


傳統誤區:為求數據,犧牲效率

經典理論認為,強化學習(動物和AI的核心學習方式)的效率由一個相對固定的“學習率”決定。研究者通常給予小鼠極微量的獎勵(不足其日常需求的1%),旨在鼓勵它們為獲得更多獎勵而不斷重復行為,從而產生大量用于分析的學習“試次”。這被視為標準操作,但代價可能是學習過程被不必要地拉長了。

核心突破:獎勵大小決定學習速度

研究團隊設計了一系列復雜的任務,包括隱藏目標導航、高難度抓取運動技能和感覺決策。他們比較了標準微量獎勵提高10-100倍的“超大獎勵”對小鼠初始學習效率的影響。

結果令人震驚:

  • 學習效率飆升:在“超大獎勵”下,小鼠學會任務所需的嘗試次數減少了一個數量級(即10倍以上)。例如,某些導航任務,標準獎勵需數百上千次嘗試,而超大獎勵下僅需幾次就能掌握。

  • 表現質量不減:雖然學得快,但小鼠最終能達到的任務熟練度與標準獎勵組無異,排除了“為求快而犧牲精度”的可能。

  • 縮小個體差異:大獎勵顯著減少了不同小鼠在學習速度上的個體差異,使大多數個體都能快速進入高效學習狀態。


從極少數但回報極高的案例中吸取經驗教訓,往往能迅速見效(圖源自Science )

機制揭秘:多巴胺是核心“加速器”

研究從三個層面解釋了“超大獎勵”為何如此有效:

  1. 提高學習速率:獎勵越大,學習新知識的速度越快。

  2. 增強學習保持:能更好地鞏固和利用之前學到的經驗。

  3. 提升任務專注度:讓動物在實驗中更投入,減少分心。

而將這三點串聯起來的關鍵分子正是多巴胺。研究人員發現:

  • 獎勵大小編碼:消費更大獎勵時,大腦腹側紋狀體的多巴胺釋放不僅幅度更高,持續時間也更長

  • 光遺傳學驗證:通過光遺傳學手段,在給予標準獎勵時人為延長多巴胺神經元的激活時間,可以部分模擬大獎勵的效果(提高學習速率和專注度),但無法完全復制(例如,無法增強對先前學習的保持能力)。這表明多巴胺信號是主要但非唯一的介質。

深遠意義:重塑實驗范式與理論認知

這項研究具有多重深遠影響:

  • 修正理論模型:它直接將獎勵大小與學習效率掛鉤,挑戰了“學習率固定”的傳統強化學習模型,要求理論框架納入獎勵大小的動態調節作用。

  • 優化實驗設計:為動物行為學研究提供了強效的“加速”工具。在需要快速訓練動物的復雜實驗中(如神經環路解析),采用更大獎勵可極大提升實驗效率,減少動物使用量,符合“3R”原則。

  • 揭示多巴胺新功能:明確了多巴胺信號不僅編碼“獎勵預測誤差”(“驚喜”值),其信號幅度和時長本身就能調控學習的速度和專注度,深化了對多巴胺功能的理解。

  • 啟發AI與教育:為人工智能領域調整“獎勵函數”以優化學習效率提供了生物學的啟發。同時,對人類教育而言,它也隱喻了“即時、充分的正向反饋”對提升學習動力的根本性作用。

當然,研究也指出,大獎勵并非在所有學習場景中都完美,例如在某些簡單條件反射任務中可能干擾預期行為。但總體而言,這項工作像一道強光,照亮了被傳統實驗范式所忽視的動物學習的真實潛能,并指出了一個簡單而強大的原理:要學得快,有時獎勵必須給得足夠“重磅”

參考消息:

https://www.science.org/doi/10.1126/science.aeb0813

閱讀最新前沿科技趨勢報告,請訪問21世紀關鍵技術研究院的“未來知識庫”


未來知識庫是 “21世紀關鍵技術研究院”建 立的在線知識庫平臺,收藏的資料范圍包括人工智能、腦科學、互聯網、超級智能,數智大腦、能源、軍事、經濟、人類風險等等領域的前沿進展與未來趨勢。目前擁有超過8000篇重要資料。每周更新不少于100篇世界范圍最新研究資料。 歡迎掃描二維碼或訪問https://wx.zsxq.com/group/454854145828進入。

截止到2月28日 ”未來知識庫”精選的百部前沿科技趨勢報告

(加入未來知識庫,全部資料免費閱讀和下載)

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
許家印干得最"虎"的一件事:砸1000億填海造島,從傳奇到笑柄

許家印干得最"虎"的一件事:砸1000億填海造島,從傳奇到笑柄

賤議你讀史
2026-05-24 15:36:19
死了得了,我才22歲憑啥扛!大連寶媽帶2歲娃送餐崩潰,丈夫躺平

死了得了,我才22歲憑啥扛!大連寶媽帶2歲娃送餐崩潰,丈夫躺平

冷月侃娛樂
2026-05-21 17:40:53
耿同學打假后續來了!首都醫科大學博士論文再次送審“亡羊補牢”

耿同學打假后續來了!首都醫科大學博士論文再次送審“亡羊補牢”

火山詩話
2026-05-23 09:43:26
吉利官宣:希望與張雪一起引入WSBK!兩大中國品牌亮相中國站?

吉利官宣:希望與張雪一起引入WSBK!兩大中國品牌亮相中國站?

念洲
2026-05-24 12:52:21
5千萬揮霍一空后,淪落超市打工,不敢見人!馬蓉現狀太落魄

5千萬揮霍一空后,淪落超市打工,不敢見人!馬蓉現狀太落魄

明天后天大后天
2026-05-13 11:56:55
1-1 傳奇神鋒告別戰送關鍵助攻 10.2億豪門4輪不勝仍鎖定歐冠門票

1-1 傳奇神鋒告別戰送關鍵助攻 10.2億豪門4輪不勝仍鎖定歐冠門票

狍子歪解體壇
2026-05-25 01:05:40
申花球迷意難平!不止因為1-2惜敗新鵬城,更多在于以下這五點!

申花球迷意難平!不止因為1-2惜敗新鵬城,更多在于以下這五點!

田先生籃球
2026-05-24 22:31:01
馬斯克前女友爆料:萬顆衛星激光是"棋盤外的底牌"

馬斯克前女友爆料:萬顆衛星激光是"棋盤外的底牌"

閃存獵手
2026-05-22 00:22:47
投喂獅子時觀光車車門突然打開!探訪八達嶺野生動物園:猛獸區投喂項目已關閉,同類觀光車停運

投喂獅子時觀光車車門突然打開!探訪八達嶺野生動物園:猛獸區投喂項目已關閉,同類觀光車停運

紅星新聞
2026-05-24 18:07:17
不會拍就別瞎拍!看張藝謀的《主角》,才知何為真正的底層老百姓

不會拍就別瞎拍!看張藝謀的《主角》,才知何為真正的底層老百姓

糊咖娛樂
2026-05-22 15:13:07
一找一個準!男子無意間救下的野豬變身“行走的挖筍雷達”,每年為他創收12萬元

一找一個準!男子無意間救下的野豬變身“行走的挖筍雷達”,每年為他創收12萬元

封面新聞
2026-05-23 22:34:20
佟麗婭為陳思誠整理衣服疑似復婚!離婚后首同框,一家三口超有愛

佟麗婭為陳思誠整理衣服疑似復婚!離婚后首同框,一家三口超有愛

八卦王者
2026-05-22 09:30:17
最高法剛改的這條規則,可能正在讓你失去告政府的權利

最高法剛改的這條規則,可能正在讓你失去告政府的權利

錦繡旅途
2026-05-25 07:30:08
公交集團正式員工已經躺平不了了,想要混到退休不太可能

公交集團正式員工已經躺平不了了,想要混到退休不太可能

娛樂圈見解說
2026-05-09 00:23:44
當年,為什么大部分日本民眾都支持侵華戰爭?深層原因是這個

當年,為什么大部分日本民眾都支持侵華戰爭?深層原因是這個

阿胡
2024-07-04 11:01:21
段睿深夜悲痛發文:再也沒有人等我回去了!

段睿深夜悲痛發文:再也沒有人等我回去了!

原夢叁生
2026-04-22 20:06:36
直到這三場戰爭,全世界才知道我國國力強大到了什么程度

直到這三場戰爭,全世界才知道我國國力強大到了什么程度

農夫史記
2026-05-24 21:11:10
三孩非親生再添猛料!妻子出軌手段堪比教科書,閨蜜竟是最大幫兇

三孩非親生再添猛料!妻子出軌手段堪比教科書,閨蜜竟是最大幫兇

子芫伴你成長
2026-05-19 22:59:19
“跟子彈一樣”!重慶永川暴雨致3人遇難17人失聯

“跟子彈一樣”!重慶永川暴雨致3人遇難17人失聯

中國新聞周刊
2026-05-24 19:11:54
風塵女子要怎么分辨出來?行家人都能看出來

風塵女子要怎么分辨出來?行家人都能看出來

霹靂炮
2026-04-03 21:31:48
2026-05-25 08:12:49
人工智能學家 incentive-icons
人工智能學家
人工智能領域權威媒體
4762文章數 37465關注度
往期回顧 全部

科技要聞

神舟二十三號航天員乘組順利進駐“天宮”

頭條要聞

暴雨突襲17歲少年赤膊上陣 讓村民踩著他大腿肩膀轉移

頭條要聞

暴雨突襲17歲少年赤膊上陣 讓村民踩著他大腿肩膀轉移

體育要聞

唐斯發牌,大頭逆襲:騎士跌向殘忍夏季

娛樂要聞

王鶴棣掉粉超20萬!代言和作品遭抵制

財經要聞

退市!33年“A股不死鳥”落幕

汽車要聞

國民家轎再上新 帝豪向上系列限時5.59萬起

態度原創

教育
家居
健康
手機
公開課

教育要聞

在這個拼人脈的世界,會說話真的很重要!

家居要聞

低調傳承 溫潤沉靜

外泌體 ≠ 生長因子!它們之間究竟有何區別?

手機要聞

OPPO開始發力:Reno新機再次被確認,超清云臺主攝來襲!

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版