網易首頁 > 網易號 > 正文 申請入駐

別被「更像真的視頻」騙了,AI視頻生成,還遠未真正學會物理世界

0
分享至



這兩年,視頻生成模型進步很快。清晰度更高了,鏡頭更穩了,人物和場景看上去也越來越自然。很多時候,我們判斷一個模型強不強,看的就是它 “像不像真的”。但這其實只回答了一半的問題:它看起來像真的,不代表它真的符合現實世界的物理規律。這件事放在短視頻生成里,也許只是 “偶爾有點怪”;但如果視頻模型真的要往 world model、仿真系統、具身智能這些方向走,問題就不一樣了。一個模型如果連物體怎么接觸、狀態怎么變化、事件怎么按因果順序發生都搞不清楚,那它再像,也只是像。



現在的視頻評測,更像是在比 “好不好看”

目前,視頻生成領域常見的評測方式,要么看自動指標,要么讓人直接選 “哪個視頻更好”。這種方式當然有意義,它能比較清晰度、流暢度、觀感這些東西,但它很難告訴你:視頻里到底有沒有違反基本物理常識

比如,一個物體是不是無緣無故消失了;兩個東西是不是明明沒接觸卻發生了交互;一個動作的結果是不是和前面的過程根本對不上。這些問題,才真正關系到模型是在 “生成一個像真的畫面”,還是在 “模擬一個可信的世界”。

Physion-Eval:從 “視覺真實” 走向 “物理真實” 的新 benchmark

這篇工作提出了Physion-Eval。它不是再做一個 “誰的視頻更好看” 的排行榜,而是想認真回答一個更關鍵的問題:AI 生成的視頻,在物理層面到底有多真實



  • 論文標題: Physion-Eval: Evaluating Physical Realism in Generated Video via Human Reasoning
  • 作者: Qin Zhang, Peiyu Jing, Hong-Xing Yu, Fangqiang Ding, Fan Nie, Weimin Wang, Yilun Du, James Zou, Jiajun Wu, and Bing Shuai
  • 作者單位:Physion Labs,斯坦福大學,MIT,哈佛大學,Character AI
  • 論文鏈接: https://arxiv.org/abs/2603.19607
  • 數據集鏈接: https://huggingface.co/datasets/PhysionLabs/Physion-Eval
  • 視頻鏈接:https://www.youtube.com/watch?v=Vbn_W3WNUHw

這個 benchmark 同時覆蓋第一人稱和第三人稱場景,包含10,990 條專家推理軌跡,覆蓋22 類細粒度物理現象。和常見評測不太一樣的地方在于,這里的每條樣本不只是簡單打個分,而是會標出錯誤發生在什么時候、屬于哪一類問題,以及為什么不對

數據上,第三人稱部分來自WISA-80K,第一人稱部分基于EPIC-KITCHENS構建。為了保證標注質量,論文組織了90 位具有 STEM 背景并接受過本科物理訓練的專家標注者,采用雙人標注和資深專家裁決的流程,最后得到的是帶時間戳、錯誤類別和文字解釋的高質量標注。

在這一過程中,人類智能所展現出的優勢尤為明顯:人類不僅能夠識別視覺上的異常,更能夠基于物理直覺與因果理解,對復雜的動態過程進行推理和解釋。相比之下,即使是當前最先進的多模態模型,在時序一致性、交互合理性以及隱含物理規律的判斷上,仍存在明顯不足。





最直接的結論:現在的模型,還遠談不上 “物理一致”

這篇工作的主結論其實很簡單,也很扎眼:在物理過程敏感的場景里,83.3% 的第三人稱生成視頻和 93.5% 的第一人稱生成視頻,都至少包含一個人類可以明確識別的物理錯誤。這說明什么?說明今天的視頻模型確實越來越會制造 “真實感” 了,但離 “真正符合物理規律” 還有很遠。



而且這些錯誤不是零零散散的小毛病,而是系統性的。論文里總結的典型問題包括:接觸或交互失敗、對象突然出現或消失、時間連貫性崩塌、因果順序錯亂、材料或狀態變化異常、幾何碰撞不合理等等。換句話說,問題不只是 “畫面有點假”,而是模型對物體、接觸、運動和結果之間最基本的關系,還經常搞錯。



很多錯誤不是粗糙,而是 “看著像,但其實完全不對”

Physion-Eval 里最有意思的地方,其實是那些具體例子。它們不是那種一眼就看出來的低級 bug,而是第一眼好像還行,仔細一想卻明顯不符合常識。

比如,桌面上突然多出一把本來不存在的刀;瓶口朝下,液體卻不往下流;水直接穿過鍋底;又或者一個鍋被兩根手指以幾乎不可能的方式拎起來。它們的問題不在于 “渲染不精細”,而在于直接違背了物體守恒、重力、不可穿透性和穩定接觸這些最基本的物理規律。

這也是為什么我們覺得,這項工作不只是 “又多了一個 benchmark”。它更像是在提醒大家:今天很多模型也許已經很會生成 “像真的視頻”,但還遠沒有學會 “世界為什么會這樣動”。





更麻煩的是,連最強的多模態模型也不太會看這些錯誤

論文還問了另一個很現實的問題:那能不能讓現在的大模型來當 “自動評委”,替人判斷一個視頻有沒有物理問題?

答案是,暫時還不行。

文章評估了10 個開源和閉源的 MLLM critic,結果顯示,它們和人類判斷之間還有明顯差距。以Gemini 3.0 Pro為例,它會漏掉超過74.4% 的第三人稱錯誤視頻和 90.1% 的第一人稱錯誤視頻。而且它們不只是漏檢,還會把錯誤發生的時間說錯,甚至編出根本不存在的原因。

這點其實很關鍵。因為如果以后大家真想靠自動 critic 去評估 world model 或視頻生成系統,那 critic 本身至少得先真的看懂視頻里的物理過程。就目前來看,人類判斷依然是最可靠的標準。









越是高動態的物理過程,越容易暴露當前模型的短板

論文進一步從physical intensitydynamics兩個維度分析了生成模型與市面上已有的 MLLM critic 的表現。結果表明,相比強度大小,過程本身的動態性和復雜性更容易暴露視頻生成模型的物理建模缺陷。對 MLLM critic 來說也是如此:只有當錯誤足夠明顯時,它們才會表現出有限的判斷能力,但整體仍明顯落后于人類。







總結

Physion-Eval 想指出的,不只是 “現在的視頻生成模型還不夠強”,而是一個更根本的問題:當行業越來越關注視頻 “看起來有多真” 的時候,我們可能忽略了它 “實際上對不對”

對于真正想做 world model、機器人、具身智能和仿真的人來說,這個問題繞不過去。畫面更清晰、動作更順滑,當然重要;但如果物體會無故出現,液體不會往下流,動作結果和前因對不上,那模型就還沒有真正學會世界的運行方式。

視頻生成下一階段,也許不該只繼續卷觀感,而應該更認真地去解決物體持續性、接觸關系、狀態變化、時序一致性和因果結構這些更本質的問題。“看起來對”,從來不等于 “實際上對”

作者介紹

本文由來自美國頂級科技公司與世界一流高校的豪華作者陣容共同完成,集結 Physion Labs、斯坦福大學、MIT、哈佛大學及 Character AI 的核心研究者。其中,Physion Labs 團隊(Qin Zhang、Peiyu Jing、Bing Shuai)長期專注于生成式視頻與世界模型中的物理一致性問題,構建了面向行業的評估基礎設施與數據閉環,致力于成為下一代生成模型的 “物理可信層”。其余作者包括斯坦福大學的 Hong-Xing Yu、Fan Nie、James Zou、Jiajun Wu,麻省理工學院的 Fangqiang Ding,哈佛大學的 Yilun Du,以及 Character AI 的 Weimin Wang 等業內頂尖學者。

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
謝杏芳沒想到,林丹出軌9年后,竟會因這一舉動,實現口碑逆轉

謝杏芳沒想到,林丹出軌9年后,竟會因這一舉動,實現口碑逆轉

科學發掘
2026-04-21 12:50:46
再斗嘴!愛德華茲:鮑威爾照顧好你老婆 杜蘭特:先顧好你家那位

再斗嘴!愛德華茲:鮑威爾照顧好你老婆 杜蘭特:先顧好你家那位

Emily說個球
2026-04-21 10:10:48
廈門女子曬一人餐走紅,吃的干凈,會很舒服,網友:缺男友嗎?

廈門女子曬一人餐走紅,吃的干凈,會很舒服,網友:缺男友嗎?

餐飲新紀元
2026-04-22 07:10:35
退休后的老兩口,性生活可能比小年輕還猛!

退休后的老兩口,性生活可能比小年輕還猛!

櫻桃小丸子1987
2026-04-20 21:23:07
8場轟5球!曼城著眼未來,又淘到一位巴西神童,2000萬歐可以搞定

8場轟5球!曼城著眼未來,又淘到一位巴西神童,2000萬歐可以搞定

零度眼看球
2026-04-22 08:26:56
伊朗要求美國立即釋放被扣押船只及人員

伊朗要求美國立即釋放被扣押船只及人員

新京報
2026-04-21 11:35:38
緊急叫停!醫生:服用二甲雙胍的人,身體出現6種癥狀必須停藥

緊急叫停!醫生:服用二甲雙胍的人,身體出現6種癥狀必須停藥

荊醫生科普
2026-04-21 15:09:02
44伊萬卡美得還是很突出,在家族女眷合影中一眼驚艷,比女兒還美

44伊萬卡美得還是很突出,在家族女眷合影中一眼驚艷,比女兒還美

毒舌小紅帽
2026-04-20 18:57:14
德國百年巨頭倒下時,浙江修鞋匠花4500萬買下,如今年入70億

德國百年巨頭倒下時,浙江修鞋匠花4500萬買下,如今年入70億

毒sir財經
2026-04-19 22:12:53
43歲男子和富婆車震后,富婆還想要更多,2016年他將51歲富婆殺死

43歲男子和富婆車震后,富婆還想要更多,2016年他將51歲富婆殺死

漢史趣聞
2026-04-06 19:17:12
67萬億重磅落地!比08年還兇猛,房價可能變天?普通人如何應對?

67萬億重磅落地!比08年還兇猛,房價可能變天?普通人如何應對?

閱微札記
2026-04-21 14:56:02
橫店群演現狀!已被AI逼到無戲可拍,近年群演上崗機會銳減70%

橫店群演現狀!已被AI逼到無戲可拍,近年群演上崗機會銳減70%

小徐講八卦
2026-04-21 09:03:46
原來他就是趙心童恩師,因經濟收入低轉行教練,教出4位世界冠軍

原來他就是趙心童恩師,因經濟收入低轉行教練,教出4位世界冠軍

攬星河的筆記
2026-04-21 23:17:32
打卡山西古書院,體驗穿越千年的讀書地

打卡山西古書院,體驗穿越千年的讀書地

新華社
2026-04-21 13:33:19
39歲前國腳現狀:定居美國踢野球,早已財富自由,有2個可愛女兒

39歲前國腳現狀:定居美國踢野球,早已財富自由,有2個可愛女兒

攬星河的筆記
2026-04-14 15:18:30
6月1日起全國工地統一用工新規,明確60歲以上農民工上崗標準

6月1日起全國工地統一用工新規,明確60歲以上農民工上崗標準

阿嚼影視評論
2026-04-20 21:02:56
哈登離開快船才懂:他不是沒實力,只是之前選錯了隊友

哈登離開快船才懂:他不是沒實力,只是之前選錯了隊友

林子說事
2026-04-21 17:35:41
歐冠出局的情緒未平息,卡馬文加在對陣阿拉維斯的比賽中被噓

歐冠出局的情緒未平息,卡馬文加在對陣阿拉維斯的比賽中被噓

懂球帝
2026-04-22 07:05:10
生父再婚狠心棄養,三個舅舅硬扛一生,養大苦命外甥女

生父再婚狠心棄養,三個舅舅硬扛一生,養大苦命外甥女

閱微札記
2026-04-21 19:45:33
國家下死命令:2027年城投清零!中小城市的公交、供水會漲價嗎?

國家下死命令:2027年城投清零!中小城市的公交、供水會漲價嗎?

顧史
2026-04-21 05:44:11
2026-04-22 10:04:49
機器之心Pro incentive-icons
機器之心Pro
專業的人工智能媒體
12822文章數 142633關注度
往期回顧 全部

科技要聞

凌晨突發!ChatGPT Images 2.0發布

頭條要聞

牛彈琴:伊朗發出讓人毛骨悚然的警告 玩的就是心跳

頭條要聞

牛彈琴:伊朗發出讓人毛骨悚然的警告 玩的就是心跳

體育要聞

一到NBA季后賽,四屆DPOY就成了主角

娛樂要聞

宋承炫曬寶寶B超照,宣布老婆懷孕

財經要聞

伊朗拒絕出席 特朗普宣布延長停火期限

汽車要聞

全新坦克700正式上市 售價42.8萬-50.8萬元

態度原創

本地
藝術
游戲
旅游
軍事航空

本地新聞

春色滿城關不住|白鵑梅浪漫盛放,吳山藏了一片四月雪

藝術要聞

鄭麗文平底鞋成焦點!宋楚瑜馬英九書法爭議引發網友熱議!

突發!微軟官宣XGP大幅降價 COD不再首發訂閱

旅游要聞

文旅鋪就千年侗寨致富路

軍事要聞

特朗普宣布延長停火 伊朗表態

無障礙瀏覽 進入關懷版