6月17日,阿里發布可實時構建和交互的開放式世界模型產品HappyOyster 1.0(快樂生蠔1.0),該產品深度學習物理世界狀態轉移規律,能主動推演從動作到反饋的因果鏈,并保持人物和環境的長程一致性。HappyOyster 1.0具備世界探索(Adventure)和實時導演(Directing)兩大核心能力,并升級了交互功能,新增攻擊、跳躍、劇情回溯、劇情分支等操控能力,用戶僅需一句話或一張圖,就能生成可互動、可探索、可實時改變的AI數字世界。HappyOyster 1.0可廣泛應用于交互式游戲、虛擬陪伴、互動短劇、文旅體驗、直播等行業,目前官網已開放用戶注冊體驗,官網地址https://www.happyoyster.cn。
![]()
圖示 HappyOyster 1.0官網
區別于文生視頻模型從輸入文字到生成視頻的單向操作,HappyOyster 1.0能讓用戶完成豐富的實時互動,并支持用戶在任意節點介入,改變數字世界的走向。上述差異源自模型學習目標的不同,文生視頻模型的學習目標是文本到視頻的單向映射,而世界模型的學習目標是從“當前狀態/動作”到“下一狀態/動作”的轉移規律。相較于大語言模型日趨成熟的架構與范式,世界模型仍屬于新興賽道,而HappyOyster 1.0已在探索該賽道的前沿,它從海量自然視頻中學習現實里人物、事物和環境的演變,自主推演從動作到反饋的因果鏈,從而能自然遷移到沒見過的場景,根據用戶指令推理出新的因果,并維持數字世界的長程穩定和音視頻的長時協同。
相較上一版,HappyOyster 1.0在交互能力上做了優化升級。在世界探索模式下,用戶輸入一句話或上傳一張圖,就能生成可深度探索的數字世界,通過新增的前沖、下蹲、跳躍、攻擊等操控按鍵,豐富人物的運動軌跡,并支持載具駕駛與武器戰斗等復雜物理交互;實時導演模式賦予了用戶“上帝視角”,通過新增的暫停、回溯與分支敘事能力,用戶能在體驗過程中的任意節點暫停,并回跳至劇情中的關鍵節點,輸入新的提示詞來改變劇情走向,實現了用低成本讓同一開局衍生出無限可能。目前,世界探索模式支持長達1分鐘的連續實時位移與鏡頭控制,實時導演模式支持生成3分鐘以上的480p或720p實時畫面,且兩個模式的生成內容均能一鍵分享。
HappyOyster 1.0正在探索下一代多模態的互動內容形態。在交互式游戲領域,開發者無需耗費數周甚至數月寫代碼、做測試,通過上傳圖片和輸入提示詞,就能在HappyOyster 1.0上快速生成符合物理規律的開放世界原型、角色交互和各類戰斗場景;在互動短劇、虛擬陪伴或直播場景中,用戶通過自然語言指令,就能構建人物和劇情,并能在任意節點改寫畫面、角色、劇情走向,把傳統的線性敘事轉化為用戶掌握主動權的互動體驗;在文旅領域,HappyOyster 1.0能為游客提供沉浸式的探索體驗,不僅能生成具備穩定一致性的數字人IP,還可以讓游客決定游覽路線,甚至步入深海、月球等奇幻場景。
世界模型的發展仍處于早期階段,業界缺乏可量化的測評標準。目前,HappyOyster團隊聯合南京大學,正在著手打造首個覆蓋過程交互、跨模態對齊、長程一致與物理仿真驗證的行業基準,旨在填補世界模型測評標準的空白。據悉,HappyOyster 1.0近期還會全面開放API接口,攜手各行各業共建世界模型的新生態,全面釋放世界模型生產力。即日起,每日登錄HappyOyster 1.0官網即可免費領取積分,體驗可實時交互的數字世界。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.