亚洲中文字幕乱码亚洲-蜜桃成熟视频在线观看-免费中文字幕视频在线-中国五十路熟妇洗澡视频-亚洲av伊人啪啪c-国产精品成人一区二区-国产自拍视频一区在线观看-成人一区不卡二区三区四区-亚洲情精品中文字幕99在线

網(wǎng)易首頁 > 網(wǎng)易號(hào) > 正文 申請入駐

GBDT預(yù)測誤差常年1-3%?這位工程師用20分鐘把方差問題連根拔了

0
分享至

供應(yīng)鏈預(yù)測里有個(gè)老毛病:GBDT(梯度提升決策樹)建完模就跑,誤差卡在1-3%死活下不去。很多人以為是數(shù)據(jù)天花板,其實(shí)是異方差性在作祟——方差隨水平變化而波動(dòng),模型學(xué)的是平均,預(yù)測的是變形。

本文講一個(gè)20分鐘能落地的三件套:留出樣本殘差→平方根穩(wěn)定方差→逆變換+偏差校正。核心武器是Jensen不等式,解決非線性變換后的系統(tǒng)性低估問題。

為什么差分在供應(yīng)鏈里經(jīng)常翻車

預(yù)測論壇逛多了,你會(huì)聽到一種聲音:"LGBM(LightGBM)直接擬合,別折騰。"這話對了一半。GBDT確實(shí)強(qiáng),但"直接擬合"在供應(yīng)鏈場景里有個(gè)陷阱:目標(biāo)序列往往 heteroskedastic(異方差),高水平時(shí)期的波動(dòng)絕對值更大,模型被迫在"擬合高峰"和"擬合低谷"之間做妥協(xié)。

傳統(tǒng)計(jì)量經(jīng)濟(jì)學(xué)愛用的差分法,在這里經(jīng)常幫倒忙。差分確實(shí)能讓序列看起來平穩(wěn),但GBDT對噪聲極其敏感——差分操作把原始信號(hào)的微擾放大成噪聲,模型轉(zhuǎn)頭就去擬合這些人工制造的波動(dòng)。供應(yīng)鏈數(shù)據(jù)里,差分后的序列信噪比往往更差,除非你的領(lǐng)域本身有強(qiáng)烈的單位根特征。

平方根變換是更干凈的路子。它壓縮高值區(qū)域的方差、拉伸低值區(qū)域,把"喇叭口"形狀的方差結(jié)構(gòu)拉平。但這里埋著一個(gè)數(shù)學(xué)雷:√y 的期望不等于 y 期望的平方根。直接逆變換回去,預(yù)測值會(huì)系統(tǒng)性偏低。

Jensen不等式:那個(gè)被忽略的偏差項(xiàng)

核心等式很簡單:E[f(X)] ≠ f(E[X]),只要 f 是非線性的。平方函數(shù)是凸函數(shù),根據(jù)Jensen不等式,(E[√y])2 < E[y]。模型在√y空間學(xué)到的是 E[√y],我們逆變換得到的是 (E[√y])2,中間差了一個(gè) Var(√y)。

補(bǔ)全公式:E[y] = (E[√y])2 + Var(√y)。這個(gè)方差項(xiàng)就是偏差校正的關(guān)鍵。但在供應(yīng)鏈預(yù)測里,你不能直接用訓(xùn)練集的殘差方差——那是過擬合的幻覺。需要 out-of-fold(留出樣本)殘差,模型沒見過這些數(shù)據(jù),方差估計(jì)才可靠。

拿到留出殘差 z 之后,直接算 Var(z) 有個(gè)問題:水平漂移和趨勢會(huì)讓方差估計(jì)膨脹。一個(gè)SKU從100漲到1000,殘差絕對值自然變大,這不代表預(yù)測精度下降,只是規(guī)模變了。需要一種對水平變化穩(wěn)健的方差估計(jì)方法。

Variogram:用一階差分挖出局地方差

地統(tǒng)計(jì)學(xué)里的 variogram(變異函數(shù))有個(gè)巧妙性質(zhì):連續(xù)差分的方差與原始方差存在解析關(guān)系。具體實(shí)現(xiàn)是,計(jì)算留出殘差的一階差分 Δz,取 Var(Δz)/2 作為 Var(√y) 的估計(jì)量。

為什么除以2?因?yàn)?Var(Δz) = Var(z_t - z_{t-1}) = 2Var(z) - 2Cov(z_t, z_{t-1})。假設(shè)殘差序列局部平穩(wěn)、自相關(guān)較弱,協(xié)方差項(xiàng)趨近于零,Var(Δz) ≈ 2Var(z),所以 Var(z) ≈ Var(Δz)/2。這個(gè)估計(jì)對水平漂移免疫——如果整個(gè)序列向上平移100,差分后平移被消掉,方差估計(jì)不變。

實(shí)操中有個(gè)坑:重尾分布的SKU,單周異常值就能把 σ2 頂上天。偏差校正項(xiàng)一旦超過預(yù)測值本身的10%,校正就變成了主導(dǎo),預(yù)測失真。經(jīng)驗(yàn)做法是設(shè)5-10%的上限,作為安全閥。校正目的是"輕推"預(yù)測向上,而非重寫預(yù)測。

20分鐘落地:三步走檢查清單

第一步,留出樣本殘差。時(shí)間序列用前向鏈?zhǔn)津?yàn)證,非時(shí)序用K折。關(guān)鍵是殘差必須來自模型未見的樣本,訓(xùn)練集殘差方差是樂觀偏差。

第二步,平方根變換擬合。目標(biāo)變?yōu)椤蘺,GBDT正常訓(xùn)練。預(yù)測階段輸出 √?,準(zhǔn)備逆變換。

第三步,variogram校正。計(jì)算留出殘差的一階差分,Var(Δz)/2 得方差估計(jì),加到 (√?)2 上。重尾SKU設(shè)5-10%上限,完成。

整個(gè)流程不需要改模型結(jié)構(gòu),不增加推理成本,純后處理。誤差降幅1-3%在供應(yīng)鏈場景里意味著真金白銀——庫存周轉(zhuǎn)、缺貨損失、加急運(yùn)費(fèi),都是可量化的ROI。

最后留個(gè)問題:你的預(yù)測管線里,有多少"理所當(dāng)然"的預(yù)處理步驟,其實(shí)從未用留出樣本驗(yàn)證過真實(shí)增益?

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
許家印家族奢靡無度堪比帝王

許家印家族奢靡無度堪比帝王

超先聲
2026-04-16 16:36:35
10個(gè)小時(shí)從北京到廣西,蘇林體驗(yàn)的高鐵,我們原來早已習(xí)以為常!

10個(gè)小時(shí)從北京到廣西,蘇林體驗(yàn)的高鐵,我們原來早已習(xí)以為常!

全城探秘
2026-04-16 14:14:12
公務(wù)員巨額財(cái)產(chǎn)來源不明罪,只要低于300萬或不再需被追究責(zé)任

公務(wù)員巨額財(cái)產(chǎn)來源不明罪,只要低于300萬或不再需被追究責(zé)任

小蘿卜絲
2026-04-15 18:38:38
美國副總統(tǒng)萬斯:我為美國做得最自豪的一件事就是告訴歐洲,你們想軍援烏克蘭就自己買,美國不會(huì)再買武器送往烏克蘭了

美國副總統(tǒng)萬斯:我為美國做得最自豪的一件事就是告訴歐洲,你們想軍援烏克蘭就自己買,美國不會(huì)再買武器送往烏克蘭了

瀟湘晨報(bào)
2026-04-16 10:56:15
采訪了100個(gè)娶了小三的男人,他們幾乎都說了同一句話,讓人恍然

采訪了100個(gè)娶了小三的男人,他們幾乎都說了同一句話,讓人恍然

千秋文化
2026-04-15 20:18:32
法國全票通過“文物歸還法案” 接下來呢?

法國全票通過“文物歸還法案” 接下來呢?

看看新聞Knews
2026-04-15 22:44:05
鄭麗文這回麻煩大了!

鄭麗文這回麻煩大了!

小熊看國際
2026-04-16 11:11:58
波神:庫里太不真實(shí)了,無論落后多少分他都能讓球隊(duì)保持威脅

波神:庫里太不真實(shí)了,無論落后多少分他都能讓球隊(duì)保持威脅

懂球帝
2026-04-16 17:10:26
不再是120/80,“新血壓標(biāo)準(zhǔn)”已公布,別再自己嚇自己!

不再是120/80,“新血壓標(biāo)準(zhǔn)”已公布,別再自己嚇自己!

芹姐說生活
2026-04-14 23:27:03
江蘇最新癌情發(fā)布!需警惕這幾種癌

江蘇最新癌情發(fā)布!需警惕這幾種癌

句容發(fā)布
2026-04-16 09:15:07
信仰不是法外之地,全國開始雷霆出擊整頓寺廟

信仰不是法外之地,全國開始雷霆出擊整頓寺廟

卷史
2026-04-16 08:06:56
潘石屹:我的反思

潘石屹:我的反思

互聯(lián)網(wǎng)大觀
2026-04-16 13:08:52
封鎖一天就受不了伊朗還想擾亂紅海

封鎖一天就受不了伊朗還想擾亂紅海

海子侃生活
2026-04-16 07:05:18
女子利用天氣預(yù)報(bào)頻繁購買飛機(jī)延誤險(xiǎn),5年買中900多次,獲賠近300萬,被抓時(shí):我符合保險(xiǎn)理賠要求

女子利用天氣預(yù)報(bào)頻繁購買飛機(jī)延誤險(xiǎn),5年買中900多次,獲賠近300萬,被抓時(shí):我符合保險(xiǎn)理賠要求

譚老師地理大課堂
2026-04-15 20:11:42
韓國人在外國網(wǎng)站發(fā)帖,“中國準(zhǔn)備什么時(shí)候把萬里長城還給我們?

韓國人在外國網(wǎng)站發(fā)帖,“中國準(zhǔn)備什么時(shí)候把萬里長城還給我們?

網(wǎng)絡(luò)易不易
2026-04-16 14:00:11
靈隱寺事件,遠(yuǎn)非低智表象那么簡單

靈隱寺事件,遠(yuǎn)非低智表象那么簡單

林中木白
2026-04-16 17:34:07
恒大負(fù)債2.4萬億,許家印只轉(zhuǎn)移走了500多億,剩下的錢去哪里了?

恒大負(fù)債2.4萬億,許家印只轉(zhuǎn)移走了500多億,剩下的錢去哪里了?

林小明商業(yè)評說
2026-04-16 14:57:19
后續(xù)!孕婦200買水果被老公罵:已去醫(yī)院終止妊娠 老公發(fā)怒砸東西

后續(xù)!孕婦200買水果被老公罵:已去醫(yī)院終止妊娠 老公發(fā)怒砸東西

小鋭?dòng)性捳f
2026-04-14 08:37:44
炸穿臺(tái)灣政壇!蔣友松強(qiáng)行遷走兩蔣懸棺,半世紀(jì)漂泊終要?dú)w鄉(xiāng)

炸穿臺(tái)灣政壇!蔣友松強(qiáng)行遷走兩蔣懸棺,半世紀(jì)漂泊終要?dú)w鄉(xiāng)

陳漎侃故事
2026-04-14 17:28:18
俄羅斯和阿塞拜疆同意妥善處置阿客機(jī)墜機(jī)事件

俄羅斯和阿塞拜疆同意妥善處置阿客機(jī)墜機(jī)事件

環(huán)球網(wǎng)資訊
2026-04-15 22:52:40
2026-04-16 20:40:49
算力游俠
算力游俠
游走在API與報(bào)錯(cuò)之間,用魔法(AI)打敗魔法的非硬核玩家。
1486文章數(shù) 15關(guān)注度
往期回顧 全部

頭條要聞

法國通過文物歸還法案 分析傾向法案優(yōu)先針對的非中國

頭條要聞

法國通過文物歸還法案 分析傾向法案優(yōu)先針對的非中國

體育要聞

皇馬拜仁踢出名局,但最搶鏡的還是他

娛樂要聞

絲芭傳媒創(chuàng)始人王子杰去世,享年63歲

財(cái)經(jīng)要聞

海爾與醫(yī)美女王互撕 換血抗衰生意迷霧

科技要聞

趙明:智駕之戰(zhàn),看誰在大模型上更高效

汽車要聞

空間大五個(gè)乘客都滿意?體驗(yàn)嵐圖泰山X8

態(tài)度原創(chuàng)

藝術(shù)
健康
數(shù)碼
時(shí)尚
軍事航空

藝術(shù)要聞

張大千『 花菓薈萃冊』

干細(xì)胞抗衰4大誤區(qū),90%的人都中招

數(shù)碼要聞

京東外賣發(fā)布首款智能控溫冷熱餐箱X1:讓外賣吃出堂食味

8個(gè)監(jiān)控?cái)z像頭,這就是“完美丈夫”對她的愛

軍事要聞

封鎖霍爾木茲海峽后 美釋放雙重信號(hào)

無障礙瀏覽 進(jìn)入關(guān)懷版