網易首頁 > 網易號 > 正文 申請入駐

復盤AI芯片技術路線 專用芯片復刻礦機歷程

0
分享至

近期,境外Taalas公司展示了一種非傳統的AI硬件路線,他們將Llama 3.1 8B模型在物理層面直接“硬連線”到了一顆芯片中。這種“模型即硬件”的設計,放棄了傳統的軟件加載與運行模式,實現了模型參數的物理固化。

如果你在其實際演示網站中體驗,最直觀的改變是極低的輸出延遲。與目前常見的逐字生成的流式輸出不同,其文本近乎瞬間完整呈現。這并非單純的工程優化,而是對當前AI算力底層架構瓶頸的一次直接回應。

內存墻當前AI算力的核心限制

要理解Taalas的路線,需要審視當前GPU架構在運行大模型時面臨的“內存墻”效應。

目前,計算核心的處理速度已遠遠超過顯存的讀寫帶寬。在模型推理時,系統必須不斷將龐大的參數從顯存搬運至計算單元,計算完成后再進行回寫。這導致系統的大部分時間與能耗實際上消耗在了數據傳輸的路上,而非真正的矩陣運算。

在Agent應用逐漸普及的背景下,這一效率損耗被進一步放大。當Agent需要執行復雜的思維鏈推理或大量高頻的自我迭代時,底層頻繁的數據搬運會帶來顯著的延遲。盡管英偉達的H200、B200等頂級GPU在持續推高硬件規格,但通用計算架構在運行特定模型時,必然存在因數據搬運帶來的效率折損。

面對這一問題,Taalas的解決思路非常直接。既然搬運數據的成本過高,就通過硬件級別的定制,直接在物理結構上省去參數調取的環節。

三種算力卡演進路線

探討Taalas的技術路線前,有必要重新審視“專用集成電路(ASIC)”中“專用”的定界。當前主流的AI芯片架構大致可劃分為三種演進方向:

英偉達GPU:以通用性為核心的計算架構

英偉達GPU的核心優勢在于極高的通用性。其底層設計通過海量的CUDA核心、Tensor Core,配合高帶寬顯存及先進封裝,實現對各類算法和任務的廣泛兼容。這種架構的代價是面臨較高的成本與功耗,并且在執行具體任務時,由于數據必須在顯存和計算核心之間頻繁調度,始終受制于內存帶寬瓶頸。

傳統NPU/AI加速器:專用ASIC

以昇騰、寒武紀等為代表的NPU,其“專用性”體現在針對特定任務類型的架構優化。這類硬件提供了一套專用的AI指令集,能夠高效處理被拆解為基礎矩陣運算的各類模型。但在硬件結構上,它們依然保留了可編程邏輯與通用存儲空間,模型權重仍需從存儲單元搬運至計算核心,并未從根本上消除數據調度帶來的延遲與功耗損耗。

Taalas:面向特定權重的模型級ASIC

Taalas選擇了更為激進的定制化路線。其“專用性”直接下探至特定的模型算法與參數權重。該架構舍棄了通用的指令集和取指邏輯,將特定的模型權重通過金屬布線直接固化在電路層面,實現了“硬件即模型”。

通過這種硬連線設計,Taalas移除了傳統架構中用于數據搬運、緩存和尋址的絕大部分邏輯電路。數據流經硬件即等同于完成計算,直接跳過了傳統計算架構中“取指令、讀數據、執行、寫回”的循環,從而在物理層面上規避了內存帶寬的限制。

將這三條路線放在一起對比,其底層架構的差異一目了然:


從算法固化到物理重構

理解了上述的技術路線分野,就能更清晰地看到Taalas方案的工程價值。他們放棄了讓通用GPU去“適配”大模型的傳統思路,轉而采取逆向工程,直接根據特定大模型的邏輯,反向定制硬件。這一過程,本質上是一次從“算法硬化”到“物理流片”的完整重構。

具體的實施路徑可以拆解為四個關鍵環節。首先,團隊選定架構相對穩定的大模型(如Llama 3.1),對其進行深度量化,并通過專用的EDA編譯器,將復雜的數學邏輯直接轉換為邏輯門電路圖。接著,利用自動化設計流程,將龐大的權重參數直接“刻”在芯片頂層的金屬布線中。這意味著,模型參數不再是儲存于外部內存、需要頻繁搬運的數據,而是直接成為了硬件電路的物理組成部分。隨后,在制造環節,由于去除了昂貴的HBM顯存和復雜的CoWoS先進封裝,該方案可以選擇臺積電N6等成熟制程進行流片,大幅降低了生產成本與工藝門檻。最終,這種基于“金屬掩膜定制”的ASIC方案,能夠在約60天的周期內完成從軟件算法到硅片硬件的轉化,交付出一顆專屬于特定模型的“硬連線”芯片。

根據2026年2月的公開資料,這顆被命名為Taalas HC1的芯片展現出了顯著的性能指標。在吞吐量方面,單顆芯片運行Llama 3.1 8B模型時,推理速度可達16,000至17,000 Tokens/秒,在量級上超越了傳統的GPU架構。同時,其系統延遲被控制在1毫秒以內,實現了極高的交互實時性。在能效與成本控制上,相比主流GPU,其能效比提升了約10倍;而得益于對HBM顯存和復雜冷卻系統的剝離,生產成本則降低了約20倍。

人類的平均閱讀速度約為每秒5個詞,該芯片單秒輸出的文本量,相當于人類一個小時的常規閱讀量。此外,項目的工程效率同樣值得關注,整個項目由24名工程師耗資約3000萬美元完成。在“每秒每用戶Token數”這一核心評估維度上,Taalas HC1相較于Nvidia H200、B200以及Groq等競品,展現出了明顯的底層架構優勢。


客觀而言,該方案目前仍存在局限性,現階段僅提供了4bit量化版本的Llama 3.1 8B模型演示,尚未能全面勝任復雜多變的生產級任務。但這套已經跑通的工程流程,足以證明“模型即硬件”的路線具備現實可行性,為打破當前AI算力的內存墻瓶頸提供了一種全新的破局思路。

當推理跨越延遲鴻溝

業界普遍將2026年視作Agent應用落地的關鍵節點。然而,Agent要真正實現大規模普及,其底層前提在于,推理過程必須具備極低的延遲與成本。Taalas這種高度定制化的物理固化方案,有望在以下幾個核心場景中打破現有算力的物理瓶頸。

在復雜決策與推演場景中,當Agent需要在極短時間內模擬大量方案并輸出最優解時,單芯片每秒過萬Token的吞吐量將提供堅實的底層支撐。無論是高頻金融交易、實時策略推演,還是復雜的多步邏輯規劃,算力延遲將不再是制約系統表現的短板。

對于具身智能而言,消除數據傳輸延遲是其走向現實的關鍵。若將此類ASIC芯片直接集成至機器人的硬件系統中,其推理延遲可壓縮至毫秒級。這意味著機器人在物理世界中能夠進行高頻的實時決策,如避障、抓取與人機協作,徹底消除傳統云端通信帶來的遲滯感。

在本地化計算與數字分身領域,近期openClaw等應用的受關注,再次引發了業界對云端數據處理隱私風險的討論。Taalas的方案本質上提供了一種端側的高效算力節點。未來可能出現類似家用路由器的本地“Agent節點”,在不依賴網絡的前提下,憑借固化模型的低功耗與高隱私特性,實現個人數據的本地化閉環處理。這種物理層面的數據隔離,從根源上規避了隱私泄露風險。

更進一步,從邊緣計算的角度來看,在特定或單一應用場景下,企業或個人部署大模型可能不再需要構建高成本的算力集群。只需在本地PC或局域網服務器配備搭載特定開源模型的專用算力卡,即可實現高速、低成本的模型全量復用。

靈活性與專用化的技術選擇

顯然,這種極端的固化方案面臨著關于“靈活性”的嚴峻拷問。當底層模型更新換代時,已經物理流片的芯片是否會迅速淪為沉沒成本?這是所有專用計算架構都必須回應的質疑。

Taalas的應對邏輯在于其極短的工程流片周期。在約60天的研發交付速度下,“模型即硬件”的模式實際上改變了芯片的生命周期定義。隨著前期約3000萬美元的開發成本在規?;a中被迅速攤薄,硬件的更新節奏有望與模型的迭代周期實現同步。未來,終端設備升級大模型,可能將簡化為更換一塊低成本的物理算力模塊。

這一路線之爭,最終觸及了當前AI基礎設施的核心議題,即行業正處于一個關鍵的技術分水嶺。一端是追求極致通用性但成本與功耗高昂的GPU架構,另一端是犧牲通用性以換取極致能效與單點性能的特定任務ASIC。

歷史的技術演進往往具有相似性。正如加密貨幣挖礦經歷了從通用CPU到GPU,最終被專用ASIC礦機全面主導的過程;當AI大模型的底層架構逐漸收斂、特定算法趨于穩定時,專用的推理芯片極有可能復刻這一路徑,在推理端重塑現有的AI算力市場格局。

算法定義硬件的范式轉移

Taalas的設計可以被視為“模型級專用ASIC”。其之所以在當下節點具備落地的可能,核心動因在于大模型發展環境的宏觀變遷。當前,國內外主流大模型的底層架構與性能表現已呈現出明顯的趨同態勢。當模型算法步入收斂期,高度專用的硬件定制便具備了產業層面的生存土壤?;仡檹挠ミ_GPU、寒武紀NPU再到Taalas的演進路線,本質上正是AI芯片在舍棄部分通用性的同時,向極致專用性能不斷傾斜的歷程。以此觀之,單芯片每秒1.7萬Token的吞吐量,僅僅是這一硬件演進趨勢的開端。

客觀而言,通用計算架構并不會因此走向消亡。在訓練前沿模型、探索全新架構以及應對長尾和未知應用場景時,以英偉達GPU為代表的通用算力依然具有不可替代的地位。但在推理端,面對模型結構固定、任務目標單一的應用場景,專用芯片在能效比與性價比上的底層優勢將逐步顯現。簡而言之,不同架構的AI芯片在生態中并非絕對的零和博弈,而是各司其職的互補關系。未來的算力市場格局,將取決于各類計算架構如何在自身的優勢區間內,精準匹配并落地對應的核心應用。

從英偉達到寒武紀,再到Taalas,就是AI芯片通用性逐漸降低,專用性能逐步提升。

對于模型收斂,任務單一的應用,專用芯片有更好的能效比、性價比,但在探索未知,任務多樣化的應用,英偉達的GPU依然不可撼動。

簡言之,各類AI芯片之間不是取代關系,而是互補關系,關鍵在于挖掘出自己的比較優勢和殺手級應用。

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
特朗普吹大了,中國說到做到,一塊H200芯片都沒買,美國開始急了

特朗普吹大了,中國說到做到,一塊H200芯片都沒買,美國開始急了

霽寒飄雪
2026-04-27 11:39:46
羅翔:如果一個人突然努力工作,業余時間開始學習,不再參加社交活動,那么,身邊的人可能不僅不會幫他,還會拉他下來,原因就一個!

羅翔:如果一個人突然努力工作,業余時間開始學習,不再參加社交活動,那么,身邊的人可能不僅不會幫他,還會拉他下來,原因就一個!

譚老師地理大課堂
2026-04-22 00:03:57
男子趕集,聞見陌生姑娘身上有土腥味,道士說:快去找一盆黑狗血

男子趕集,聞見陌生姑娘身上有土腥味,道士說:快去找一盆黑狗血

千秋文化
2026-04-04 21:32:27
假空姐大鬧亞航后續:身份被扒出,只是機場地勤,十級美顏認不出

假空姐大鬧亞航后續:身份被扒出,只是機場地勤,十級美顏認不出

往史過眼云煙
2026-04-26 15:20:56
伊朗戰爭,出乎世界預料,美軍打出了一個更不想看到的對手

伊朗戰爭,出乎世界預料,美軍打出了一個更不想看到的對手

過期少女致幻錄
2026-04-04 03:30:52
無緣橫掃,湖人19分慘敗火箭,敗筆曝光,最大罪人無可爭議!

無緣橫掃,湖人19分慘敗火箭,敗筆曝光,最大罪人無可爭議!

體育見習官
2026-04-27 12:27:36
70歲畢彥君北京養老:無豪車保姆,工資卡上交,生活愜意

70歲畢彥君北京養老:無豪車保姆,工資卡上交,生活愜意

草莓信箱
2026-04-13 15:04:31
懸崖:刑場那一槍故意打偏了三寸,周乙醒來,發現高彬正對著他笑

懸崖:刑場那一槍故意打偏了三寸,周乙醒來,發現高彬正對著他笑

卡西莫多的故事
2026-03-11 09:50:05
農民當著眼鏡蛇面剝了3條小蛇:就愛喝蛇酒,次日下田一看后悔了

農民當著眼鏡蛇面剝了3條小蛇:就愛喝蛇酒,次日下田一看后悔了

卡西莫多的故事
2025-10-23 10:48:34
俄羅斯十天180度變臉,拋棄16年老友控制匈牙利

俄羅斯十天180度變臉,拋棄16年老友控制匈牙利

青田花姑娘
2026-04-27 10:25:58
一個收入不高的人,可以偽精致到什么程度?網友:天天為賬單發愁

一個收入不高的人,可以偽精致到什么程度?網友:天天為賬單發愁

另子維愛讀史
2026-04-20 09:36:56
村干部要“交差”了!上面下死命令,多數村莊必須拿出創收成績單

村干部要“交差”了!上面下死命令,多數村莊必須拿出創收成績單

老特有話說
2026-04-26 15:51:30
演員宋寧峰公園遛娃被偶遇,坐在地上給兒子喂飯,張婉婷賺錢養家

演員宋寧峰公園遛娃被偶遇,坐在地上給兒子喂飯,張婉婷賺錢養家

一窺究竟
2026-04-26 23:40:37
段慧玲任北京大學副校長,出生于內蒙古赤峰市

段慧玲任北京大學副校長,出生于內蒙古赤峰市

瑪拉沁信息網
2026-04-27 08:43:12
四人幫垮臺后,賀子珍說出多年的心愿,鄧小平為何3年后才答復

四人幫垮臺后,賀子珍說出多年的心愿,鄧小平為何3年后才答復

元哥說歷史
2026-04-27 12:20:07
毫無預期地,我遇見了言笑晏晏的江青

毫無預期地,我遇見了言笑晏晏的江青

霹靂炮
2026-04-26 22:56:06
續約多森姆要花多少錢?森林狼目前報價受限 今夏或達4年1億美元

續約多森姆要花多少錢?森林狼目前報價受限 今夏或達4年1億美元

羅說NBA
2026-04-26 19:15:08
地鐵女子和66歲老太互毆后續!正臉曝光,央媒發聲,拘留只是開始

地鐵女子和66歲老太互毆后續!正臉曝光,央媒發聲,拘留只是開始

天天熱點見聞
2026-04-27 12:26:46
大齡剩女可以破防到什么程度?發朋友圈且通知媒人,還向家人告狀

大齡剩女可以破防到什么程度?發朋友圈且通知媒人,還向家人告狀

丫頭舫
2026-04-24 20:40:08
現代級魔改,估計俄羅斯娘家也看傻眼了吧

現代級魔改,估計俄羅斯娘家也看傻眼了吧

三叔的裝備空間
2026-04-24 23:53:16
2026-04-27 13:19:00
鐵流1988
鐵流1988
芯片、通信
367文章數 72關注度
往期回顧 全部

科技要聞

打1折!DeepSeek輸入緩存降價

頭條要聞

女子將車停車庫沒動卻被認定要為事故擔次責 交管回應

頭條要聞

女子將車停車庫沒動卻被認定要為事故擔次責 交管回應

體育要聞

最抽象的天才,正在改變瓜迪奧拉

娛樂要聞

《奔跑吧14》剛播就把一手好牌打稀爛

財經要聞

DeepSeek融資、字節加碼 AI開始真燒錢了

汽車要聞

在不確定中尋找確定性:大眾汽車的中國解法

態度原創

親子
數碼
時尚
藝術
公開課

親子要聞

你聽懂這3句話,躺平的孩子很快就能好起來了!

數碼要聞

輕薄本搭載2.5GbE RJ45,System76推出Pangolin Pro (2026)

比起買大件,這些“小裝備”更派得上用場!

藝術要聞

你絕對想不到,攝影能讓她成為女神!

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版