網易首頁 > 網易號 > 正文 申請入駐

315曝光的AI大模型投毒,技術上很好治,生意上很難治

0
分享至


AI大模型投毒技術,我可太熟悉了,我的工作就是折騰大模型deepsearch。

簡單了解一下豆包、千問這些AI的技術原理,就能理解如何AI投毒、如何收拾投毒者。AI APP收到用戶提問后,響應過程分為三步:S1.把用戶問題分解為幾個搜索關鍵詞,S2.去網絡搜索,S3.從搜索結果中提取問題答案。

S1和S3都是大模型推理運算,數據都在GPU里,很安全。S2可以做手腳。315晚會曝光的AI投毒正是發生在S2步,好聽的名字叫GEO(Generative Engine Optimization, 生成式引擎優化)。


GEO公司用AI生成一批文章,可能幾篇、十幾篇、幾十篇,然后發布到一堆僵尸自媒體賬號上。AI大模型搜索的時候,搜到這些虛假文章,然后當成真實內容一本正經地告訴用戶。AI中毒了。

很明顯,整治AI投毒的技術方法有多個:

一是,自媒體平臺提前識別AI生成的文章,打上標記,讓大模型不采納這些文章的信息。國標GB 45438-2025《網絡安全技術 人工智能生成合成內容標識方法》[1]已經在2025年9月1日開始實施。網信辦在2025年03月14日發布的《人工智能生成合成內容標識辦法》,也是2025年9月1日開始實施。

按照這兩個文件的規定,社交平臺有責任識別AI生成的自媒體文章,并打上顯式標識和隱式標識。顯式標識看得見,例如圖片上的水印“AI生成”;隱式標簽看不見,例如文件的元數據、圖片的元數據。

二是,把投毒騙子控制的僵尸賬號都封掉,至少得限流,讓它0曝光。

三是,AI APP只搜索可靠的信源,例如媒體賬號、政府企業賬號、身份經過認證的大號,例如雷軍的賬號、楊紫的賬號,粉絲小于100萬的小卡拉米賬號不收錄。我自己的工作中,deepsearch的信源只選藍V(媒體、政企機構)和金橙V(頭部大V),避免中毒。

技術上給AI排毒很簡單,但實際上不容易。先是社交平臺沒動力,GEO公司運營著大量的僵尸賬號,而且發貼很多,舍得出錢買流量。如果把這些賬號封了,平臺財報上的日活、月活、營收數據都不好看。

AI APP也沒動力,大模型推理很費錢,生成一張圖片要3毛錢,生成1秒視頻要一塊錢。每天上億人在免費用,燒錢太快,必須得想辦法掙錢,否則沒法向投資人交待。

AI APP沒有能力殺掉所有虛假文章。搜索引擎的技術含量很高,不是一個初創團隊能搞得定的。因此,AI APP會向某度等公司購買數據。某度,大家都了解,掙錢不要命,夾雜虛假信息再正常不過了。

最后一個原因,也是315晚會上所有亂象的根本原因:消費者沒有實力把壞蛋送進去踩縫紉機,沒有實力讓他們傾家蕩產。有毒的雞爪天天吃,有毒的文字看點咋了?!多大點事!

全文完,求關注,求轉評贊三連。


特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
發售1天回本!育碧30年IP推出新作:高調復蘇

發售1天回本!育碧30年IP推出新作:高調復蘇

游民星空
2026-05-02 19:11:08
油價跳水,白銀直拉!美國,大動作!以色列突然發動襲擊……

油價跳水,白銀直拉!美國,大動作!以色列突然發動襲擊……

證券時報e公司
2026-05-01 21:56:45
林詩棟橫掃賈維斯,王楚欽大勝沃克,松島輝空不敵邱黨

林詩棟橫掃賈維斯,王楚欽大勝沃克,松島輝空不敵邱黨

子水體娛
2026-05-02 21:15:25
X:羽田機場國際線人少得像開玩笑一樣

X:羽田機場國際線人少得像開玩笑一樣

東京新青年
2026-05-02 16:29:45
黑尾醬,徹底消失了?

黑尾醬,徹底消失了?

生如稗草
2026-03-15 08:48:11
黑咖啡立大功!中科院發現降糖成分,效果遠超常用降糖藥!

黑咖啡立大功!中科院發現降糖成分,效果遠超常用降糖藥!

思思夜話
2026-05-02 11:45:05
一代神卡回歸!RTX 3060 12GB六月復產:七月上市

一代神卡回歸!RTX 3060 12GB六月復產:七月上市

快科技
2026-05-01 13:55:02
伊森談續約:很難說沒想過 我愛休斯頓但沒人知道結果會如何

伊森談續約:很難說沒想過 我愛休斯頓但沒人知道結果會如何

北青網-北京青年報
2026-05-02 21:17:11
普京真正接班人出現了,俄羅斯唯一能打敗北約的人:誰不服都不行

普京真正接班人出現了,俄羅斯唯一能打敗北約的人:誰不服都不行

春序娛樂
2026-04-28 02:20:34
天道好輪回,誰又饒過誰?43歲姚笛曝出兒子近照,文章開店爆火

天道好輪回,誰又饒過誰?43歲姚笛曝出兒子近照,文章開店爆火

丹妮觀
2026-05-02 17:50:18
笑瘋了!新加坡媒體尬吹印度,稱用手吃飯更香,評論區懟得太狠了

笑瘋了!新加坡媒體尬吹印度,稱用手吃飯更香,評論區懟得太狠了

譚談社會
2026-05-01 22:49:20
失誤太多!梁靖崑把控關鍵分,3-2險勝格林,男乒3-0英格蘭奪首勝

失誤太多!梁靖崑把控關鍵分,3-2險勝格林,男乒3-0英格蘭奪首勝

籃球資訊達人
2026-05-02 21:36:31
深圳核心區“破冰”!有豪宅盤一天成交10多套,置業顧問:新政后前期儲備客戶加速成交

深圳核心區“破冰”!有豪宅盤一天成交10多套,置業顧問:新政后前期儲備客戶加速成交

每日經濟新聞
2026-05-02 19:33:41
賴清德宣布竄訪成功后,中國大陸的表態,會讓賴清德感到一陣后怕

賴清德宣布竄訪成功后,中國大陸的表態,會讓賴清德感到一陣后怕

陳腕特色體育解說
2026-05-02 21:14:03
偷偷結婚生子?移民國外?李梓萌消失2月引爭議,擔心的事發生了

偷偷結婚生子?移民國外?李梓萌消失2月引爭議,擔心的事發生了

離離言幾許
2026-03-16 16:31:23
豬大腸被關注!研究發現:糖尿病患者常吃豬大腸,或有5種變化

豬大腸被關注!研究發現:糖尿病患者常吃豬大腸,或有5種變化

芹姐說生活
2026-05-01 14:34:43
美航母將撤退,局勢徹底逆轉!為了向中國供油,伊朗打算再拼一把

美航母將撤退,局勢徹底逆轉!為了向中國供油,伊朗打算再拼一把

說歷史的老牢
2026-05-01 08:58:49
今年誰有他猛!入選全明星,拿到1.5億大合同,帶隊殺入季后賽

今年誰有他猛!入選全明星,拿到1.5億大合同,帶隊殺入季后賽

球毛鬼胎
2026-05-02 18:57:56
拉塞爾維斯布魯克為何隕落速度如此之快?只因這兩次重大轉折

拉塞爾維斯布魯克為何隕落速度如此之快?只因這兩次重大轉折

籃球小煙花
2026-05-02 08:00:03
巴勒斯坦公布選舉結果,哈馬斯被排除在外,加沙18年統治正式落幕

巴勒斯坦公布選舉結果,哈馬斯被排除在外,加沙18年統治正式落幕

流史歲月
2026-05-01 12:00:22
2026-05-02 22:11:00
小小河
小小河
站打工人立場,用邏輯理性,探事實真相。投訴者為好人擋災。
80文章數 171關注度
往期回顧 全部

科技要聞

AI熱潮耗盡庫存,Mac Mini起售調高200美元

頭條要聞

香港兩名6旬男女碼頭長凳上做不雅行為 被人拍下傳網上

頭條要聞

香港兩名6旬男女碼頭長凳上做不雅行為 被人拍下傳網上

體育要聞

休賽期總冠軍,輪到休斯頓火箭

娛樂要聞

高圓圓趙又廷游三亞 牽手逛街好甜蜜

財經要聞

雷軍很努力 小米還是跌破了30港元大關

汽車要聞

新紀錄!零跑汽車4月交付達71387臺

態度原創

親子
手機
本地
數碼
公開課

親子要聞

麻麻們都喜歡的兒子

手機要聞

行業漲價 華為反降!nova 15全系限時優惠100元 2599元起

本地新聞

用青花瓷的方式,打開西溪濕地

數碼要聞

技嘉官宣英特爾600 / 700 / 800主板支持單子通道HUDIMM內存

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版