亚洲中文字幕乱码亚洲-蜜桃成熟视频在线观看-免费中文字幕视频在线-中国五十路熟妇洗澡视频-亚洲av伊人啪啪c-国产精品成人一区二区-国产自拍视频一区在线观看-成人一区不卡二区三区四区-亚洲情精品中文字幕99在线

網(wǎng)易首頁(yè) > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

奧特曼預(yù)言與現(xiàn)實(shí)相差幾何?12個(gè)頂級(jí)模型“創(chuàng)業(yè)”一年,僅3個(gè)存活

0
分享至

“在 AI 時(shí)代,一個(gè)人有可能創(chuàng)辦一家估值 10 億美元的獨(dú)角獸公司?!?024 年初,OpenAI CEO 山姆·奧特曼(Sam Altman)拋出考慮了這個(gè)后來(lái)被廣泛引用的判斷。

數(shù)據(jù)似乎也正驗(yàn)證這一趨勢(shì)。據(jù)股權(quán)管理平臺(tái)Carta 統(tǒng)計(jì)的2025 年數(shù)據(jù)顯示:超過(guò)三分之一的新公司由單人創(chuàng)始人創(chuàng)辦。從 2019 年的 23.7% 到 2025 年上半年的 36.3% ,獨(dú)立創(chuàng)始人創(chuàng)立公司的比例在六年間增長(zhǎng)了 53% 。不僅不需要聯(lián)合創(chuàng)始人了,甚至一個(gè)人、一套 AI 工具就能打天下的“一人公司”案例也開(kāi)始出現(xiàn)在科技媒體的報(bào)道中。

AI越來(lái)越強(qiáng),但一個(gè)人+AI,真的等于一家公司嗎?AI能做到什么程度?

Collinear AI(專(zhuān)注企業(yè)級(jí)AI Agent的初創(chuàng)公司)的研究團(tuán)隊(duì)認(rèn)為,整個(gè)行業(yè)正在快速邁向長(zhǎng)周期、多步驟的Agent工作流,但可靠性并沒(méi)有跟上這一進(jìn)程。因此,他們發(fā)布了YC-Bench(首個(gè)帶有模擬時(shí)鐘的開(kāi)源長(zhǎng)時(shí)序 Agent 評(píng)測(cè)基準(zhǔn)) 試圖用科學(xué)的方式回答這個(gè)問(wèn)題——不是靠感覺(jué)和案例,而是把“一個(gè)人能做的事”拆解成可量化的任務(wù),然后用全球最強(qiáng)的 AI 模型逐一去測(cè)試。

研究團(tuán)隊(duì)構(gòu)建了一個(gè)高擬真度的模擬創(chuàng)業(yè)環(huán)境,AI 在里面扮演 CEO,讓 AI Agent 從零運(yùn)營(yíng)一家公司:管理員工、挑選項(xiàng)目合同、應(yīng)付難纏的客戶(hù)、維持公司賬上的現(xiàn)金流。一年后,從起始資金 20 萬(wàn)美元,到最終能活下來(lái)且賺錢(qián)的,12 個(gè)頂級(jí)模型里,只有 3 個(gè)做到了。

論文來(lái)源: YC-Bench: Benchmarking AI Agents for Long-Term Planning and Consistent Execution https://arxiv.org/abs/2604.01212
YC-Bench 怎么測(cè)的?

前沿模型能經(jīng)營(yíng)一家創(chuàng)業(yè)公司嗎?

帶著這樣的疑問(wèn),研究團(tuán)隊(duì)發(fā)布了 YC Bench。其核心設(shè)計(jì)思路是:給一個(gè)前沿模型種子資金、一支小團(tuán)隊(duì)和一個(gè)任務(wù)市場(chǎng),讓它模擬經(jīng)營(yíng)一家 AI 初創(chuàng)公司——管理員工、按時(shí)交付、分配資源,在一年內(nèi)實(shí)現(xiàn)利潤(rùn)最大化。


核心挑戰(zhàn)有三層:

  • 不確定性下的規(guī)劃:市場(chǎng)是部分可觀察的,AI 不能“偷看答案”,必須基于不完整信息做決策。
  • 延遲反饋:很多決策的后果要幾周甚至幾個(gè)月才顯現(xiàn),AI 必須從延遲的信號(hào)中學(xué)習(xí)和調(diào)整。
  • 錯(cuò)誤累積:早期的一個(gè)糟糕決策會(huì)在后期放大,最終導(dǎo)致破產(chǎn)——這正是現(xiàn)實(shí)創(chuàng)業(yè)中最殘忍的規(guī)律。

其中,研究團(tuán)隊(duì)增加了對(duì)抗性壓力:環(huán)境里有意設(shè)置了難纏的客戶(hù)、不斷上漲的人力成本,讓 AI 在壓力下做出判斷。

評(píng)估的方法,是12 個(gè)模型(含閉源和開(kāi)源),每個(gè)模型跑 3 次(不同隨機(jī)種子數(shù)據(jù)集),唯一允許在回合間“記事”的工具是 Scratchpad(草稿本)——相當(dāng)于 AI 的內(nèi)部筆記本,這是它跨回合保持記憶的唯一方式。

在這個(gè)評(píng)測(cè)中,Agent = LLM + 工具 + 決策框架,LLM 是大腦,框架是手腳。

每個(gè)被測(cè)模型都被套上了一層 Agent 框架,讓它們能:

  • 查看公司當(dāng)前狀態(tài)(財(cái)務(wù)報(bào)表、員工情況)
  • 根據(jù)看到的信息做推理和決策
  • 調(diào)用工具執(zhí)行動(dòng)作(分配任務(wù)、招聘員工、推進(jìn)時(shí)間)

這 12 個(gè)模型做的就是這個(gè) Agent 循環(huán),不是單純地回答問(wèn)題。YC-Bench 測(cè)的不是"哪個(gè)大模型答卷考得好",而是"哪個(gè)模型當(dāng)老板當(dāng)?shù)煤?。

12 個(gè)模型,同一場(chǎng)壓力測(cè)試,結(jié)果:三個(gè)沒(méi)想到

研究團(tuán)隊(duì)挑選了 12 個(gè)來(lái)自不同公司的主流 AI 模型,放在同一套環(huán)境里進(jìn)行三輪獨(dú)立測(cè)試。


模型在模擬環(huán)境里的行為差異極大,主要體現(xiàn)在四個(gè)維度。其中,Scratchpad 寫(xiě)入頻率反映了 AI 在長(zhǎng)程任務(wù)中進(jìn)行主動(dòng)規(guī)劃和自我反思的強(qiáng)度;任務(wù)檢查比例反映了 AI 是否主動(dòng)核實(shí)客戶(hù)可信度;并發(fā)任務(wù)數(shù)反映 AI 是否存在“過(guò)度并行”問(wèn)題。


在計(jì)算成本與穩(wěn)定性上,API成本差異極為懸殊,而結(jié)果卻并不與成本正相關(guān)。


圖中可以看到不同模型之間運(yùn)行時(shí)間差異巨大。同樣跑完一年模擬,Claude Opus 4.6 用了70分鐘,GPT-5.4 Nano只用了3分鐘。深入拆解,有以下幾個(gè)原因:

  • 首先,運(yùn)行時(shí)間和Token量強(qiáng)相關(guān),這意味著AI在每個(gè)決策回合“想了多久”。Claude Opus 4.6 產(chǎn)生了16.7M token,而GPT-5.4 Nano只有2.0M token。這背后源于兩個(gè)行為:Scratchpad的寫(xiě)入量(記錄各種情況)和每輪發(fā)出的命令數(shù)(與環(huán)境交互)。
  • 其次,不同模型本身推理速度和吞吐量差別也很大,比如Gemini Flash系列是專(zhuān)為速度優(yōu)化,推理極快,其他GPT-5.4 Nano/Mini也是輕量級(jí)小模型,參數(shù)少、推理快,而Claude Opus 4.6是旗艦大模型,參數(shù)量大,每個(gè)Token計(jì)算量高,自然也就慢了。
  • 此外,還存在API網(wǎng)絡(luò)延遲的疊加效應(yīng)。YC-Bench中跑了幾百個(gè)回合,每輪都要調(diào)用API,旗艦款模型的響應(yīng)延遲高于輕量模型,再乘以幾百輪,延遲就會(huì)被大幅放大。

綜合來(lái)看,結(jié)論還是有不少讓人意外之處。

1. 頂級(jí)模型的差距,比想象中大得多

在三輪測(cè)試中,12 個(gè)模型里,只有 3 個(gè)能持續(xù)跑贏 20 萬(wàn)美元起始資金。剩下 9 個(gè),要么勉強(qiáng)持平,要么在一年內(nèi)走向破產(chǎn)。


但更有意思的是始終存活下來(lái)的前三名對(duì)比:


Top 3 模型最終資金對(duì)比

其中,GLM-5 以極低成本接近 Claude Opus 的表現(xiàn),可以說(shuō)是 Claude Opus 的“性?xún)r(jià)比殺手”——差距極小,但算力消耗天差地別。這對(duì)那些想用 AI 運(yùn)營(yíng)公司的人來(lái)說(shuō),是個(gè)重要信號(hào):最貴的模型不一定是最優(yōu)的。

2. Scratchpad 是生死線

這是整個(gè)論文最反直覺(jué)的發(fā)現(xiàn):決定輸贏的并不完全是參數(shù)量,而是Scratchpad 的使用方式。

例如,在前文表格中,Gemini 3.1pro 作為旗艦款的Pro模型,按慣例來(lái)講應(yīng)該是同系列中參數(shù)最大的,但在三次測(cè)試中破產(chǎn)兩次;反觀其輕量版模型Gemini 3 Flash一次都沒(méi)有破產(chǎn),雖然最終資金不多,但至少活下來(lái)了。

而其他能持續(xù)、規(guī)律地使用 Scratchpad 做規(guī)劃和自我反思的 AI(如 Opus 4.6、GLM-5、GPT-5.4),表現(xiàn)遠(yuǎn)優(yōu)于那些"走一步看一步"的 AI。GPT-5.4 雖然 Scratchpad 使用頻率極高(10.6次/100輪),但其高任務(wù)檢查率使其也維持了穩(wěn)定盈利。


這像極了人類(lèi)創(chuàng)業(yè)者:那些隨時(shí)記筆記、復(fù)盤(pán)決策、做長(zhǎng)期打算的人,往往比那些憑直覺(jué)行動(dòng)的人走得更遠(yuǎn)。AI 也不例外。

3. 第一道坎,來(lái)自最難纏的客戶(hù)

47% 的破產(chǎn)都始于對(duì)抗性客戶(hù)——AI 在沒(méi)有充分核實(shí)背景的情況下接受了不利條款,或者沒(méi)有識(shí)別出客戶(hù)的惡意意圖。其他主要失敗原因包括:?jiǎn)T工分配不當(dāng)(26%)、過(guò)度并行化(17%)以及其他因素(10%)。

這個(gè)數(shù)字令人意外:人們通常認(rèn)為 AI 在邏輯推理和數(shù)據(jù)分析上很強(qiáng),但識(shí)別意圖和風(fēng)險(xiǎn),恰恰是它最薄弱的地方。

更諷刺的是,論文還發(fā)現(xiàn)前沿模型有一種獨(dú)特的失敗模式:過(guò)度并行化——Claude Sonnet 4.6 平均同時(shí)承接 7.2 個(gè)任務(wù),遠(yuǎn)超其他模型,但這種"多線程"策略反而導(dǎo)致資源分散、每條線都做不深。

這不只是論文,更像是現(xiàn)實(shí)的壓力測(cè)試

看完這些實(shí)驗(yàn)數(shù)據(jù),你會(huì)發(fā)現(xiàn) YC-Bench 測(cè)的,其實(shí)就是"一個(gè)人 + AI 工具"能否真正成為一家公司的核心能力。


換句話(huà)說(shuō),YC-Bench 用代碼模擬的,正是每一個(gè)想靠 AI 創(chuàng)業(yè)的"超級(jí)個(gè)體"每天都在面對(duì)的真實(shí)挑戰(zhàn)。

山姆·奧特曼說(shuō),一個(gè)人可以創(chuàng)辦一家獨(dú)角獸。

YC-Bench 的研究說(shuō)明,前提是這個(gè)人得比 AI 更懂什么時(shí)候不該聽(tīng) AI 的。這不是對(duì) AI 的否定,恰恰是對(duì) AI 時(shí)代“一人公司”最誠(chéng)實(shí)的定義:一個(gè)人 + AI,不是降低了對(duì)創(chuàng)業(yè)者的要求,而是把要求從“你會(huì)多少技能”變成了“你有多擅長(zhǎng)做判斷”。

YC-Bench 的價(jià)值,不在于告訴我們 AI 能做什么,而在于誠(chéng)實(shí)地揭示了 AI 現(xiàn)在還不能做什么——以及在那些縫隙里,一個(gè)人必須自己補(bǔ)上的那些能力。

最后,綜合這份論文中的判斷,或許可以給在做“一人公司”的人提供幾個(gè)提示:

  • 不要被 AI 的“智商”騙了——模型在各項(xiàng)評(píng)測(cè)榜單上分?jǐn)?shù)很高,但在長(zhǎng)程任務(wù)里,堅(jiān)持用筆記、持續(xù)復(fù)盤(pán)、主動(dòng)識(shí)別風(fēng)險(xiǎn)的做事習(xí)慣,比純粹的推理能力更重要。目前沒(méi)有哪個(gè)模型在這一點(diǎn)上做到完美,包括測(cè)試中的大贏家Claude Opus。
  • “最貴的”不等于“最合適的”——GLM-5 的出現(xiàn)說(shuō)明,模型選擇上存在被嚴(yán)重低估的性?xún)r(jià)比路線。一人公司本就在資源有限的前提下運(yùn)營(yíng),沒(méi)必要為最貴的模型付溢價(jià)。
  • 早期的一個(gè)失誤,真的會(huì)殺死你——這是YC-Bench最殘酷的發(fā)現(xiàn):AI 在前幾個(gè)月的決策質(zhì)量,直接決定了后期的發(fā)展空間。一個(gè)人創(chuàng)業(yè)也是如此——最初的合同、人員、方向選擇,會(huì)在12個(gè)月后被放大成巨大的優(yōu)勢(shì)或劣勢(shì)。
  • AI 的盲點(diǎn),在人際判斷上——47%的破產(chǎn)源于客戶(hù)識(shí)別失誤,這不是技術(shù)問(wèn)題,而是 AI 缺乏“社會(huì)經(jīng)驗(yàn)”的系統(tǒng)性弱點(diǎn)。在現(xiàn)實(shí)中,這意味著一個(gè)人用 AI 跑公司,必須自己在關(guān)鍵決策上保持判斷力,而不是完全依賴(lài) AI 的建議。

(文|數(shù)智達(dá)觀,作者|蓋虹達(dá),編輯丨楊林)

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶(hù)上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
知名國(guó)企集團(tuán),六個(gè)月沒(méi)發(fā)工資了

知名國(guó)企集團(tuán),六個(gè)月沒(méi)發(fā)工資了

新浪財(cái)經(jīng)
2026-04-13 04:16:19
一個(gè)人如果讓你產(chǎn)生了以下三種感覺(jué),是老天在提醒你要遠(yuǎn)離他

一個(gè)人如果讓你產(chǎn)生了以下三種感覺(jué),是老天在提醒你要遠(yuǎn)離他

洞讀君
2026-04-15 21:05:03
《蜜語(yǔ)紀(jì)》:硅膠臉總裁、毛孔臉大膀子情婦,誰(shuí)的審美出了問(wèn)題

《蜜語(yǔ)紀(jì)》:硅膠臉總裁、毛孔臉大膀子情婦,誰(shuí)的審美出了問(wèn)題

洲洲影視娛評(píng)
2026-04-15 17:25:27
2026或不再需要固態(tài)電池!中國(guó)動(dòng)力電池重大突破,安全、成本雙殺

2026或不再需要固態(tài)電池!中國(guó)動(dòng)力電池重大突破,安全、成本雙殺

周哥一影視
2026-04-15 07:47:04
河南54歲班主任開(kāi)房猥褻15歲女生,行拘10天并調(diào)崗后勤,網(wǎng)友熱議:處罰太輕!

河南54歲班主任開(kāi)房猥褻15歲女生,行拘10天并調(diào)崗后勤,網(wǎng)友熱議:處罰太輕!

新民周刊
2026-04-15 20:18:31
云南南路老字號(hào)集體搬遷兩個(gè)月了,大壺春、小紹興仍開(kāi)著門(mén)!不關(guān)了?NO!余慶里一期規(guī)劃設(shè)計(jì)方案公示完畢

云南南路老字號(hào)集體搬遷兩個(gè)月了,大壺春、小紹興仍開(kāi)著門(mén)!不關(guān)了?NO!余慶里一期規(guī)劃設(shè)計(jì)方案公示完畢

新聞晨報(bào)隨申Hi
2026-04-15 14:20:12
特朗普已做好開(kāi)戰(zhàn)準(zhǔn)備?王毅曾警告:中美一旦沖突,結(jié)局只剩一個(gè)

特朗普已做好開(kāi)戰(zhàn)準(zhǔn)備?王毅曾警告:中美一旦沖突,結(jié)局只剩一個(gè)

霽寒飄雪
2026-04-15 09:39:39
賓漢姆7-10爆冷出局,中國(guó)7人進(jìn)正賽改寫(xiě)斯諾克格局

賓漢姆7-10爆冷出局,中國(guó)7人進(jìn)正賽改寫(xiě)斯諾克格局

阿晞體育
2026-04-15 11:52:43
白天作陪晚上同宿?明碼標(biāo)價(jià)8000一回!高端伴游淪為色情交易窩點(diǎn)

白天作陪晚上同宿?明碼標(biāo)價(jià)8000一回!高端伴游淪為色情交易窩點(diǎn)

網(wǎng)絡(luò)易不易
2026-01-20 10:17:46
是時(shí)候攤牌了,中方明確信號(hào):要打,戰(zhàn)火必須燒進(jìn)美國(guó)本土!

是時(shí)候攤牌了,中方明確信號(hào):要打,戰(zhàn)火必須燒進(jìn)美國(guó)本土!

史說(shuō)方休
2026-04-11 01:23:59
走馬上任!馬龍回歸國(guó)乒亮相新崗位,樊振東棄賽原因曝光貶褒不一

走馬上任!馬龍回歸國(guó)乒亮相新崗位,樊振東棄賽原因曝光貶褒不一

曹說(shuō)體育
2026-04-15 16:31:04
長(zhǎng)的太漂亮了,真正的珠圓玉潤(rùn),標(biāo)準(zhǔn)的東方美

長(zhǎng)的太漂亮了,真正的珠圓玉潤(rùn),標(biāo)準(zhǔn)的東方美

生活新鮮市
2026-03-27 07:21:32
黃宏現(xiàn)狀:住北京普通小區(qū),閑時(shí)照顧外孫女,65歲走路需要人攙扶

黃宏現(xiàn)狀:住北京普通小區(qū),閑時(shí)照顧外孫女,65歲走路需要人攙扶

阿雹娛樂(lè)
2026-04-14 18:52:21
7天“冷靜期”!深圳擬出重磅新規(guī)

7天“冷靜期”!深圳擬出重磅新規(guī)

深圳晚報(bào)
2026-04-15 10:16:04
陪玩陪睡都是毛毛雨!王思聰前女友曝“丑聞”,王家徹底坐不住了

陪玩陪睡都是毛毛雨!王思聰前女友曝“丑聞”,王家徹底坐不住了

蜉蝣說(shuō)
2026-04-12 11:19:36
震驚!大同懸空寺在公路旁砌墻“不讓免費(fèi)看”,當(dāng)?shù)鼐W(wǎng)友發(fā)帖反駁

震驚!大同懸空寺在公路旁砌墻“不讓免費(fèi)看”,當(dāng)?shù)鼐W(wǎng)友發(fā)帖反駁

火山詩(shī)話(huà)
2026-04-14 06:27:39
頂流小生解約遭排擠?王嘉爾要拍戲了?李昀銳孟子義三搭?何潤(rùn)東撿漏?姨太問(wèn)答

頂流小生解約遭排擠?王嘉爾要拍戲了?李昀銳孟子義三搭?何潤(rùn)東撿漏?姨太問(wèn)答

毒舌扒姨太
2026-04-15 22:42:21
20公里超長(zhǎng)縱深!攤大餅行不通了,成都必須換玩法

20公里超長(zhǎng)縱深!攤大餅行不通了,成都必須換玩法

阿萊美食匯
2026-04-15 19:32:44
深圳比亞迪火災(zāi)后續(xù):官方通報(bào)定調(diào),知情人透露起火現(xiàn)場(chǎng)更多細(xì)節(jié)

深圳比亞迪火災(zāi)后續(xù):官方通報(bào)定調(diào),知情人透露起火現(xiàn)場(chǎng)更多細(xì)節(jié)

奇思妙想草葉君
2026-04-14 19:30:57
烏克蘭5枚風(fēng)暴陰影導(dǎo)彈重創(chuàng)頓涅茨克機(jī)場(chǎng)!摧毀俄軍倉(cāng)庫(kù)

烏克蘭5枚風(fēng)暴陰影導(dǎo)彈重創(chuàng)頓涅茨克機(jī)場(chǎng)!摧毀俄軍倉(cāng)庫(kù)

項(xiàng)鵬飛
2026-04-15 21:08:30
2026-04-15 23:23:00
鈦媒體APP incentive-icons
鈦媒體APP
獨(dú)立財(cái)經(jīng)科技媒體
132286文章數(shù) 862097關(guān)注度
往期回顧 全部

科技要聞

ChatGPT十億用戶(hù)又怎樣?Anthropic直接貼臉

頭條要聞

豫劇團(tuán)下鄉(xiāng)演出臺(tái)下觀眾痛哭流涕:觀眾超千人一半落淚

頭條要聞

豫劇團(tuán)下鄉(xiāng)演出臺(tái)下觀眾痛哭流涕:觀眾超千人一半落淚

體育要聞

三球準(zhǔn)絕殺戴大金鏈:轟30+10自我救贖

娛樂(lè)要聞

謝娜現(xiàn)身環(huán)球影城,牽手女兒溫馨有愛(ài)

財(cái)經(jīng)要聞

業(yè)績(jī)失速的Lululemon:"健康"人設(shè)崩塌?

汽車(chē)要聞

空間絲毫不用妥協(xié) 小鵬GX首發(fā)評(píng)測(cè)

態(tài)度原創(chuàng)

藝術(shù)
健康
旅游
數(shù)碼
教育

藝術(shù)要聞

這山水,蕩滌胸中塵埃

干細(xì)胞抗衰4大誤區(qū),90%的人都中招

旅游要聞

美翻了!成都植物園100余種月季迎來(lái)盛花期

數(shù)碼要聞

補(bǔ)足有線,羅技推出Alto Keys琥珀K98M / K98S Plus機(jī)械鍵盤(pán)

教育要聞

千城百縣看中國(guó)|山東定陶:創(chuàng)意滿(mǎn)格大課間

無(wú)障礙瀏覽 進(jìn)入關(guān)懷版