亚洲中文字幕乱码亚洲-蜜桃成熟视频在线观看-免费中文字幕视频在线-中国五十路熟妇洗澡视频-亚洲av伊人啪啪c-国产精品成人一区二区-国产自拍视频一区在线观看-成人一区不卡二区三区四区-亚洲情精品中文字幕99在线

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

又一國產(chǎn)模型黑馬出世,追平Gemini 2.5 Pro,空間編輯反超視頻模型?

0
分享至


智東西
作者 江宇
編輯 漠影

大廠AI戰(zhàn)局升溫,轉(zhuǎn)型幾乎成為共識。模型在進(jìn)化,Agent在落地,但成本高、落地難、數(shù)據(jù)不夠,行業(yè)還在補(bǔ)課。

而京東在AI上的布局已然聚焦清晰:圍繞供應(yīng)鏈優(yōu)勢,推進(jìn)具身智能,讓AI真正進(jìn)入物理世界。此次推出的一體化圖像模型——JoyAI-Image-Edit,高度適用于生成電商、具身智能訓(xùn)練圖片。

近日,京東開源圖像模型JoyAI-Image-Edit,將空間智能納入圖像理解與編輯,讓AI開始處理真實(shí)世界中的空間關(guān)系,讓模型真正“理解空間,編輯空間”。

簡單解釋,這是一個(gè)以空間智能為核心的圖像生成與編輯模型,讓AI真正“看懂”三維空間,從而讓生成更合理、編輯更精準(zhǔn)。


從公開評測來看,JoyAI-Image-Edit各項(xiàng)指標(biāo)顯著領(lǐng)先,邁進(jìn)了國際第一梯隊(duì)空間理解刷新同量級開源模型SOTA,達(dá)到世界一流水平,大部分指標(biāo)媲美或超越閉源模型 Gemini 2.5 Pro。長文本生成中英文雙語領(lǐng)先,圖像編輯能力全面覆蓋,空間編輯精度甚至超過部分視頻世界模型。


智東西也實(shí)測了一番,在物體位置調(diào)整這類場景中,模型能夠穩(wěn)定保持結(jié)構(gòu)一致性。

值得注意的是,此番調(diào)整的物體在畫幅中僅占據(jù)很小比例,且原物體并非形狀規(guī)則,為毛絨材質(zhì),并帶有手部細(xì)節(jié)。即便如此,模型在移動(dòng)或旋轉(zhuǎn)時(shí)仍能有效減少透視錯(cuò)亂與遮擋問題,畫面整體保持自然。


▲輸入圖與指令(左)、輸出圖(右)

進(jìn)一步看,這類能力的主要落點(diǎn),在電商內(nèi)容生產(chǎn)與具身智能訓(xùn)練這兩類場景尤為適配,進(jìn)而也能延展到建筑設(shè)計(jì)、游戲開發(fā)和影視制作等場景。電商和具身,恰好與京東現(xiàn)有的AI布局形成了直接呼應(yīng)。

一、把“空間智能”寫進(jìn)模型:從“會(huì)改圖”到“會(huì)動(dòng)空間”,圖像編輯能力開始分層

傳統(tǒng)圖像編輯模型的短板集中在空間層。語義能跟上,但空間關(guān)系容易崩,例如替換物體、修改姿態(tài)時(shí),常出現(xiàn)比例失真、遮擋錯(cuò)誤、光影不一致等問題,本質(zhì)是缺乏幾何層面的理解能力。

JoyAI-Image-Edit則把“空間編輯”單獨(dú)拉出來做能力核心。模型在支持15類通用編輯任務(wù)之外,進(jìn)一步支持物體移動(dòng)、旋轉(zhuǎn)、視角變換等空間級操作,并可理解“移動(dòng)0.3米”“旋轉(zhuǎn)45度”等具備明確幾何參數(shù)的指令,讓編輯過程具備“可控性”。


在能力結(jié)構(gòu)上,模型還采用MLLM+VAE+擴(kuò)散模型(MMDiT)的統(tǒng)一架構(gòu)。


具體來說,MLLM負(fù)責(zé)空間理解與語義建模,擴(kuò)散模型執(zhí)行生成與編輯,空間信息直接參與生成過程,形成“理解—生成—再理解”的循環(huán)。

空間能力是怎么提升起來的?答案在于數(shù)據(jù)體系的重構(gòu)——包括300萬規(guī)模的OpenSpatial-3M數(shù)據(jù)集、多視角生成數(shù)據(jù),以及可記錄精確位姿參數(shù)的空間編輯數(shù)據(jù)。這些數(shù)據(jù)引導(dǎo)模型在訓(xùn)練階段學(xué)習(xí)真實(shí)幾何關(guān)系。


得益于這種設(shè)計(jì),在2D語義感知、3D空間理解、4D時(shí)空推理三個(gè)層級共13項(xiàng)Benchmark上,JoyAI-Image-Edit在9項(xiàng)空間理解Benchmark上均取得顯著提升,平均分達(dá)到64.4追平閉源的Gemini-2.5-Pro


在SpatialEdit-Bench上,JoyAI-Image-Edit的空間編輯能力表現(xiàn)尤為突出:Object Overall Score為0.649、Camera Overall Score為0.571,大幅領(lǐng)先所有圖像編輯模型,空間編輯精度超越Veo3.1、ViduQ2-Turbo和Kling等視頻世界模型。

與此同時(shí),在業(yè)界權(quán)威的榜單GEdit(偏向中文指令評測和真實(shí)用戶需求)和ImgEdit(偏向全面覆蓋的能力評測,強(qiáng)調(diào)推理和精細(xì)化編輯能力)上,JoyAI-Image-Edit得分分別為8.27和4.57,刷新開源圖像編輯模型SOTA。


▲在249道評測集黑盒人工評測成績:JoyAI-Image-Edit表現(xiàn)優(yōu)于Qwen-Image-Edit-2511以及Flux2.Dev


由此可見,將空間理解、生成和編輯整合在同一體系,可以使模型不僅知道“畫什么”,還知道“物體在什么位置、如何變化、是否合理”。

當(dāng)圖像可以被真正“操作”,而不只是簡單修改時(shí),圖像模型的能力邊界也隨之被重新定義。

二、電商+具身場景高可用,空間能力開始直接“變現(xiàn)”

空間能力成立以后,最先吃到紅利的,就是最依賴“真實(shí)世界”的場景。

電商領(lǐng)域,商品多視角生成、虛擬試衣、商品擺位調(diào)整等任務(wù)對空間一致性要求極高。

JoyAI-Image-Edit的空間編輯能力——可以移動(dòng)物體、旋轉(zhuǎn)角度、調(diào)整視角,并理解具體幾何參數(shù)——在電商場景下帶來了非常直觀的應(yīng)用價(jià)值。

比如服飾和鞋類商品,經(jīng)常需要展示不同角度、姿態(tài)或搭配組合。使用該模型,可以在原始圖片基礎(chǔ)上一鍵調(diào)整衣服折疊角度、鞋子擺放方向或包包手持位置,生成多角度素材,同時(shí)保持整體比例、光影和背景一致。


▲輸入圖(左)、輸出圖(右)、指令:Rotate the sneaker to show the front view

類似地,對于家電、家具或小型電子產(chǎn)品,空間編輯可讓商品在不同場景下“自動(dòng)換位”或旋轉(zhuǎn)展示,如沙發(fā)在不同房間角度、咖啡機(jī)在不同臺(tái)面布局,無需重拍,就能生成多角度素材。


結(jié)合模型的通用編輯能力,還可以同時(shí)進(jìn)行文字標(biāo)注、色彩微調(diào)和背景修飾等“一鍵精修”式功能,實(shí)現(xiàn)一次操作完成多種需求。


這樣,電商團(tuán)隊(duì)能夠快速產(chǎn)出多角度、精修、高可用的商品圖,大幅降低拍攝成本,同時(shí)保證展示效果的統(tǒng)一。

具身智能訓(xùn)練中,這些能力同樣適用。

機(jī)器人依賴大量真實(shí)世界數(shù)據(jù),但采集成本高、周期長。該模型可以生成具備空間一致性的高質(zhì)量圖像數(shù)據(jù),用于補(bǔ)充訓(xùn)練數(shù)據(jù),與真實(shí)采集數(shù)據(jù)形成互補(bǔ),從而提高訓(xùn)練效率和模型效果,輔助解決具身行業(yè)的數(shù)據(jù)難題。

此外,通過生成新視角輔助空間推理(Thinking with Novel Views),模型不僅用于內(nèi)容生產(chǎn),也能反向提升空間理解能力,為機(jī)器人“看懂世界”提供支持。


由此可見,無論是電商還是具身智能,本質(zhì)都依賴空間理解能力,而JoyAI-Image-Edit正是最直接落地的工具。

三、開源模型亮相,AI全景布局浮現(xiàn)端倪

這次開源JoyAI-Image-Edit顯然是京東聚焦于走向?qū)嶓w世界這一宏大AI布局的一部分,但通過觀察可以發(fā)現(xiàn),開源并不是它唯一的動(dòng)作。

除了這一模型,京東不久前還開源了JoyAI-LLM Flash模型,能力上在同等參數(shù)規(guī)模下顯著提升了性能與效率,降低開發(fā)者使用門檻,避免單純的參數(shù)規(guī)模競爭。

與此同時(shí),京東在供應(yīng)鏈和線下場景中的動(dòng)作也在悄然推進(jìn):一方面,建設(shè)全球最大的具身智能數(shù)據(jù)采集中心,結(jié)合模型生成能力進(jìn)行訓(xùn)練,為數(shù)據(jù)難題提供了新的解法;另一方面,通過JoyInside將AI能力嵌入家電、機(jī)器人、AI玩具終端,讓模型直接落地真實(shí)環(huán)境,和用戶產(chǎn)生大量深度交互。

從開源模型的應(yīng)用和這些場景動(dòng)作結(jié)合來看,可以明顯感受到京東在模型、數(shù)據(jù)和終端之間嘗試形成閉環(huán)。

開源或許只是早期的一步,而京東在產(chǎn)業(yè)場景中不斷深挖AI實(shí)踐與價(jià)值,則讓我們得以觀察到其AI能力的潛在落地路徑。

結(jié)語:京東一手開源,一手落地

從JoyAI-Image-Edit這次開源動(dòng)作可以看到,京東在AI上的選擇很明確:一手開源,一手落地。

在模型側(cè),持續(xù)開放能力,把門檻降下來,讓更多開發(fā)者可以直接用起來;在場景側(cè),把AI嵌入供應(yīng)鏈、物理世界、真實(shí)產(chǎn)業(yè)場景,從數(shù)據(jù)、模型到終端形成閉環(huán),讓能力在真實(shí)環(huán)境中跑通。

可見,京東的AI戰(zhàn)略更為務(wù)實(shí)。

供應(yīng)鏈?zhǔn)蔷〇|最硬的一張牌。在AI時(shí)代,這張牌的價(jià)值進(jìn)一步放大——模型可以嵌入商品、物流與設(shè)備,數(shù)據(jù)可以持續(xù)回流,能力可以不斷迭代。

在今天,AI有望成為京東的另一張“增長引擎牌”。

注:文中部分輸入圖來源于Arena

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
正式“接棒”!山西省屬能源國企迎來新掌門人

正式“接棒”!山西省屬能源國企迎來新掌門人

新浪財(cái)經(jīng)
2026-04-15 18:32:46
吃盡中國紅利,卻卸磨殺驢投靠美國,商務(wù)部出手,被查一點(diǎn)都不冤

吃盡中國紅利,卻卸磨殺驢投靠美國,商務(wù)部出手,被查一點(diǎn)都不冤

今墨緣
2026-02-23 14:48:26
廣州嚴(yán)打六合彩:買碼、收碼都可能被抓,后果比你想的更重

廣州嚴(yán)打六合彩:買碼、收碼都可能被抓,后果比你想的更重

芭比衣櫥
2026-04-16 01:15:30
人民日報(bào)定性:“租機(jī)貸”就是高利貸!

人民日報(bào)定性:“租機(jī)貸”就是高利貸!

新浪財(cái)經(jīng)
2026-04-15 23:09:11
每月實(shí)付373元:上海靈活就業(yè)社保的真實(shí)賬,性價(jià)比到底有多高?

每月實(shí)付373元:上海靈活就業(yè)社保的真實(shí)賬,性價(jià)比到底有多高?

朗威談星座
2026-04-15 19:35:12
特朗普已做好開戰(zhàn)準(zhǔn)備?王毅曾警告:中美一旦沖突,結(jié)局只剩一個(gè)

特朗普已做好開戰(zhàn)準(zhǔn)備?王毅曾警告:中美一旦沖突,結(jié)局只剩一個(gè)

飄逸語人
2026-04-15 22:09:26
皇馬腸子悔青!當(dāng)年不聽齊達(dá)內(nèi)的,如今被瓜迪奧拉狠狠打臉

皇馬腸子悔青!當(dāng)年不聽齊達(dá)內(nèi)的,如今被瓜迪奧拉狠狠打臉

奶蓋熊本熊
2026-04-13 04:43:26
創(chuàng)新藥迎來價(jià)值回歸 業(yè)績高增長概念股出爐

創(chuàng)新藥迎來價(jià)值回歸 業(yè)績高增長概念股出爐

證券時(shí)報(bào)
2026-04-15 20:04:31
中國隊(duì)公布跳水世界杯參賽名單,陳芋汐僅出戰(zhàn)雙人比賽

中國隊(duì)公布跳水世界杯參賽名單,陳芋汐僅出戰(zhàn)雙人比賽

云景侃記
2026-04-14 22:13:48
吳佳尼回母??炊鲙煟瓉硭彩潜蔽璧?,68歲老師是傅藝偉的前夫

吳佳尼回母??炊鲙?,原來她也是北舞的,68歲老師是傅藝偉的前夫

大鐵貓娛樂
2026-04-15 14:56:07
回京第二天,馬筱梅凌晨3點(diǎn)哭紅雙眼,曝為何汪寶兒不能住奶奶家

回京第二天,馬筱梅凌晨3點(diǎn)哭紅雙眼,曝為何汪寶兒不能住奶奶家

混沌錄
2026-04-14 20:38:06
楊冪背鍋、王曉晨不止一次暗諷,俞灝明怎么就變成眾矢之的了?

楊冪背鍋、王曉晨不止一次暗諷,俞灝明怎么就變成眾矢之的了?

小俎娛樂
2026-04-14 22:59:42
21歲投奔蔣介石,43歲戰(zhàn)勝林彪,朱德見了他還敬禮:報(bào)告,我來了

21歲投奔蔣介石,43歲戰(zhàn)勝林彪,朱德見了他還敬禮:報(bào)告,我來了

簡史檔案館
2026-02-23 11:05:03
全網(wǎng)公認(rèn)8種最難吃水果!網(wǎng)紅扎堆賣,吃過3種都是狠人

全網(wǎng)公認(rèn)8種最難吃水果!網(wǎng)紅扎堆賣,吃過3種都是狠人

復(fù)轉(zhuǎn)這些年
2026-03-21 18:37:36
48歲大媽與21歲小伙奔現(xiàn)爬山看日出,雙雙墜崖,警方發(fā)現(xiàn)背包愣住

48歲大媽與21歲小伙奔現(xiàn)爬山看日出,雙雙墜崖,警方發(fā)現(xiàn)背包愣住

罪案洞察者
2025-07-14 15:40:12
歷史性一刻!中阿一口氣簽24項(xiàng)協(xié)議,非石油貿(mào)易首破1000億美元!

歷史性一刻!中阿一口氣簽24項(xiàng)協(xié)議,非石油貿(mào)易首破1000億美元!

云舟史策
2026-04-15 07:39:12
301189,突然大漲,發(fā)生了什么?創(chuàng)新藥迎來價(jià)值回歸,業(yè)績高增長股揭秘

301189,突然大漲,發(fā)生了什么?創(chuàng)新藥迎來價(jià)值回歸,業(yè)績高增長股揭秘

數(shù)據(jù)寶
2026-04-15 19:03:15
清純得不像動(dòng)作片女一號!

清純得不像動(dòng)作片女一號!

貴圈真亂
2026-03-26 11:33:33
中國金茂,急了

中國金茂,急了

見地
2026-04-13 18:39:37
人形機(jī)器人的風(fēng)還在吹,但半數(shù)機(jī)器人公司倒下了,泡沫破滅太快了

人形機(jī)器人的風(fēng)還在吹,但半數(shù)機(jī)器人公司倒下了,泡沫破滅太快了

柏銘銳談
2026-04-13 22:52:50
2026-04-16 02:15:00
智東西 incentive-icons
智東西
智東西,AI產(chǎn)業(yè)新媒體,專注報(bào)道人工智能的前沿技術(shù)發(fā)展,和技術(shù)應(yīng)用帶來的千行百業(yè)產(chǎn)業(yè)變革。
11597文章數(shù) 117029關(guān)注度
往期回顧 全部

數(shù)碼要聞

索尼宣布5月調(diào)整Bravia電視功能:涉及天線與機(jī)頂盒體驗(yàn)

頭條要聞

法國全票通過 “將不義之財(cái)歸還中國”

頭條要聞

法國全票通過 “將不義之財(cái)歸還中國”

體育要聞

三球準(zhǔn)絕殺戴大金鏈:轟30+10自我救贖

娛樂要聞

謝娜現(xiàn)身環(huán)球影城,牽手女兒溫馨有愛

財(cái)經(jīng)要聞

業(yè)績失速的Lululemon:"健康"人設(shè)崩塌?

科技要聞

ChatGPT十億用戶又怎樣?Anthropic直接貼臉

汽車要聞

空間絲毫不用妥協(xié) 小鵬GX首發(fā)評測

態(tài)度原創(chuàng)

游戲
本地
時(shí)尚
公開課
軍事航空

萍萍、浩浩媽新作眾籌超原目標(biāo)2500%!想沖的人太多

本地新聞

12噸巧克力有難,全網(wǎng)化身超級偵探添亂

赫本愛穿的傘裙,好優(yōu)雅!

公開課

李玫瑾:為什么性格比能力更重要?

軍事要聞

萬斯:對當(dāng)前美伊局勢進(jìn)展“感到樂觀”

無障礙瀏覽 進(jìn)入關(guān)懷版