《電子技術應用》
您所在的位置:首頁 > 人工智能 > AET原創 > “周易”X3 NPU精準解決端側AI大模型運行難題

“周易”X3 NPU精準解決端側AI大模型運行難題

2025-11-20
來源:安謀科技

編者按:2025 年 11 月 13 日,安謀科技Arm China)“周易”X3 NPU IP新品。作為“All in AI”產品戰略下誕生的首款重磅產品,其性能指標表現突出:8-80 FP8 TFLOPS、單Core帶寬256GB/s、Prefill算力利用率達72%和Decode有效帶寬利用率超100%,可使AIGC大模型能力提升10倍。

隨著AI大模型技術的飛速發展,智能手機、AI PC和智能汽車等端側設備正迎來AI能力的爆發性需求。從多模態語音助手到實時圖像生成,從智能座艙交互到輔助駕駛決策,端側設備需要承載越來越復雜的AI計算任務。

然而,端側AI部署面臨算力受限、能效要求高、帶寬瓶頸、開發門檻高等多重挑戰,如何在有限的功耗和算力資源下實現大模型的高效運行,成為行業亟需突破的關鍵難題。

圖片1.png

眾所周知,在半導體領域,“面向未來5年的產品方向進行前瞻布局”已成為行業共識,涵蓋IP研發、芯片及終端產品研發量產。

因需而動,安謀科技的“周易”X3采用兼顧CNN與Transformer的通用架構設計,支持全算力類型并增強浮點運算FLOPS,助力實現從定點到浮點計算的關鍵轉變,并滿足大模型計算需求,為未來5年Gen AI、Agentic AI與Physical AI的端側落地奠定技術基石。

圖片2.png


硬件架構:專為大模型設計最新DSP+DSA架構

“周易”X3基于專為大模型設計的最新DSP+DSA架構,從計算效率、帶寬、精度適配、任務處理四大維度實現升級,精準解決端側AI大模型運行難題,打造端側AI計算效率的新標桿。

從定點轉向浮點計算,單Cluster擁有8-80 FP8 TFLOPS算力且可靈活配置,單Core帶寬高達256GB/s,支持端側大模型運行必備的W4A8/W4A16計算加速模式,集成安謀科技自研的解壓硬件WDC,使大模型Weight軟件無損壓縮后通過硬件解壓獲得額外約15%的等效帶寬,計算效率和計算密度大幅提升。

圖片3.png

同時,“周易”X3集成AI專屬硬件引擎AIFF,配合專用硬化調度器,實現超低至0.5%的CPU負載與低調度延遲,使NPU在并行處理多項AI任務時,擁有高效流暢的體驗。


軟件生態:優化大模型端到端性能,支持客戶自定義AI開發

“周易”X3 搭載完善易用的Compass AI軟件平臺,全面優化大模型端到端性能。平臺廣泛兼容TensorFlow、ONNX、PyTorch等主流AI框架,具備業界領先的大模型動態Shape支持能力,并支持GPTQ等大模型主流量化方案、 Hugging Face模型庫,與LLM、VLM、VLA及MoE等模型。

圖片4.png

同時,安謀科技積極構建開放生態,Compass AI軟件平臺已將 Parser、Optimizer、Linux Driver、TVM 及內部 IR 格式等核心組件相繼開源,并擁有豐富的調試工具,可滿足開發者白盒部署需求,且支持更易用的 DSL 算子編程語言,在深度開發模式下,客戶可以使用平臺中的Compiler、Debugger和DSL語言開發出自己的自定義算子,也可通過Parser、Optimizer等工具打造出屬于自己的模型編譯器,極大提升開發效率。

圖片5.png

“周易”Compass AI軟件平臺已支持超 160 種算子與 270 多種模型,顯著提升開發部署效率,助力客戶快速實現 AI 應用創新與落地。


性能提升:讓端側大模型“跑得穩、答得順”

“周易”X3遵循“軟硬協同、全周期服務與成就客戶”的產品準則,提供從硬件、軟件到售后服務的全鏈路支持,以前瞻性設計、專業團隊交付與深度服務投入,全面助力客戶大模型產品成功與商業化落地。

“周易”X3在架構層面實現了多項創新,集成了業界矚目的關鍵特性。

1.集成自研解壓硬件WDC:使大模型Weight軟件無損壓縮后通過硬件解壓能獲得額外15%~20%等效帶寬提升。

2.新增端側大模型運行必備的W4A8/W4A16計算加速模式:對模型權重進行低比特量化,大幅降低帶寬消耗,支持云端大模型向端側的高效遷移。

3.集成AI專屬硬件引擎AIFF(AI Fixed-Function)與專用硬化調度器:實現超低至0.5%的CPU負載與低調度延遲,靈活支持端側多任務場景和任意優先級調度場景,確保高優先級任務的即時響應。

4.支持int4/int8/int16/int32/fp4/fp8/fp16/bf16/fp32多精度融合計算,強浮點計算:可靈活適配智能手機邊緣部署、AI PC推理、智能汽車等從傳統CNN到前沿大模型的數據類型需求,平衡性能與能效。

在上述關鍵技術的加持下,“周易”X3獲得了優異的計算性能:單Cluster最高支持4個Core,擁有8-80 FP8 TFLOPS算力且可靈活配置,單Core帶寬高達256GB/s。相較于“周易”X2產品,“周易”X3的CNN模型性能提升30%-50%,多核算力線性度達到70%-80%。在同算力規格下,AIGC大模型能力較上一代產品實現10倍增長,這得益于16倍的FP16 TFLOPS、4倍的計算核心帶寬、超過10倍的Softmax和LayerNorm性能提升共同驅動。

圖片6.png

借助“周易”X3的超能力,端側大模型推理將更高效。

實測結果表明,在Llama2 7B大模型實測中,“周易”X3 NPU IP在Prefill階段算力利用率高達72%,并在安謀科技Arm China自研的解壓硬件WDC的加持下,實現Decode階段有效帶寬利用率超100%,遠超行業平均水平,滿足大模型解碼階段的高吞吐需求。


總結

“周易”X3 NPU IP的發布,標志著安謀科技Arm China“All in AI”產品戰略的正式開啟。從“周易”Z1的基礎感知到“周易”X3的復雜認知,這一技術演進路徑清晰地表明,端側AI正在從單一的功能實現,邁向融合多種模型、適應動態場景的“全民普及”新階段


subscribe.jpg

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
国产精品在线看| 在线观看欧美日本| 毛片精品免费在线观看| 欧美一区二区三区成人| 亚洲网站视频| 一区二区三区视频在线观看| 亚洲精品久久久久久一区二区| 久久www成人_看片免费不卡| 亚洲欧美在线高清| 亚洲欧美视频| 亚洲欧美成人网| 亚洲欧美伊人| 午夜精品久久久久久久99樱桃| 亚洲性感美女99在线| 一级日韩一区在线观看| 在线亚洲伦理| 亚洲性xxxx| 亚洲欧美日韩综合aⅴ视频| 亚洲欧美经典视频| 午夜精品免费视频| 欧美专区在线观看一区| 久久精品一区蜜桃臀影院| 久久精品青青大伊人av| 亚洲经典自拍| a4yy欧美一区二区三区| 亚洲深夜福利网站| 亚洲自拍偷拍网址| 久久www成人_看片免费不卡| 久久精品国产欧美激情| 久久综合九色九九| 欧美国产激情| 欧美体内she精视频在线观看| 欧美视频免费在线观看| 国产精品久久777777毛茸茸| 国产久一道中文一区| 国内精品亚洲| 亚洲黄色一区| 一区二区三区精品在线| 午夜欧美大片免费观看| 亚洲第一精品夜夜躁人人爽| 亚洲日韩欧美视频一区| 亚洲深夜影院| 久久国产精彩视频| 欧美大片免费看| 欧美性大战久久久久| 国产农村妇女精品一二区| 国内成+人亚洲| 最新亚洲视频| 亚洲综合日韩| 亚洲国产天堂久久综合| 中日韩男男gay无套| 性做久久久久久久免费看| 另类酷文…触手系列精品集v1小说| 欧美日本不卡高清| 国产日韩欧美在线观看| 亚洲国产清纯| 亚洲欧美在线磁力| 99riav1国产精品视频| 欧美一区二区精美| 欧美~级网站不卡| 国产精品久久久久久久午夜| 激情五月婷婷综合| 一本色道久久88亚洲综合88 | 永久免费视频成人| 日韩亚洲不卡在线| 久久成人国产精品| 亚洲一区二区三区久久| 久久一综合视频| 国产精品v日韩精品| 在线观看日韩欧美| 亚洲一区精品电影| 日韩午夜黄色| 久久精品国产91精品亚洲| 欧美日韩黄视频| 国内精品美女av在线播放| 一区二区三欧美| 亚洲人www| 久久激情一区| 欧美视频手机在线| 在线观看成人av电影| 亚洲视频中文| 99视频精品全部免费在线| 久久久久国产精品人| 国产精品成人观看视频免费| 亚洲国产一二三| 久久xxxx精品视频| 亚洲欧美美女| 欧美日韩国产首页| 国产一区二区三区在线观看免费| 一区二区三欧美| 99精品国产在热久久下载| 久久天堂av综合合色| 国产精品美女主播在线观看纯欲| 亚洲激情在线播放| 亚洲国产欧美在线人成| 欧美一区三区二区在线观看| 欧美日韩一区二| 亚洲国产精品成人综合| 午夜精品久久久久久久99水蜜桃| 亚洲免费在线视频| 欧美日韩美女一区二区| 最新国产成人在线观看| 亚洲国产精品久久久久秋霞不卡 | 久久精品国产久精国产一老狼| 国产精品第一区| 一本久道久久综合狠狠爱| 亚洲伦理一区| 欧美成人三级在线| 伊人激情综合| 久久精品1区| 久久天天躁狠狠躁夜夜爽蜜月| 国产精品一区久久久久| 一本一本大道香蕉久在线精品| 一本色道**综合亚洲精品蜜桃冫| 蜜臀av性久久久久蜜臀aⅴ四虎| 国产一区av在线| 欧美主播一区二区三区| 久久久久久久久久久成人| 国产一区二区三区丝袜| 久久精品国内一区二区三区| 久久久久免费观看| 激情五月***国产精品| 亚洲高清资源| 免费永久网站黄欧美| 亚洲国产99精品国自产| 亚洲美女诱惑| 欧美日韩亚洲激情| 亚洲视频在线观看| 欧美一二区视频| 国产一区二区黄| 亚洲国产另类久久精品| 欧美aa国产视频| 亚洲精品乱码久久久久久黑人| 99在线热播精品免费| 欧美日韩一区二区在线视频 | 亚洲欧美日韩在线综合| 国产精品美女久久久| 亚洲专区欧美专区| 久久精品一区中文字幕| 伊人狠狠色丁香综合尤物| 亚洲毛片在线免费观看| 欧美日韩视频一区二区| 在线一区亚洲| 久久久福利视频| 在线观看福利一区| 中国亚洲黄色| 国产婷婷精品| 亚洲精品一区二区三区av| 欧美日韩一二三区| 性欧美1819性猛交| 嫩草成人www欧美| 一区二区三区免费网站| 亚洲欧美精品在线观看| 国产一区二区精品在线观看| 最新成人在线| 欧美视频在线观看| 欧美一二三区精品| 欧美96在线丨欧| 制服诱惑一区二区| 久久九九热re6这里有精品 | 午夜视频在线观看一区二区| 欧美 日韩 国产精品免费观看| 亚洲美女免费精品视频在线观看| 亚洲女人天堂成人av在线| 国产一区二区高清| 99亚洲视频| 国产亚洲综合在线| 一本色道久久综合亚洲二区三区 | 欧美一区免费视频| 欧美精品久久99| 午夜国产精品视频免费体验区| 免播放器亚洲一区| 一区二区激情| 久久免费国产| 中国成人亚色综合网站| 久久一二三区| 一本久道久久综合中文字幕| 久久久精品日韩| 日韩一级免费| 久热re这里精品视频在线6| 中文一区二区| 欧美电影免费观看| 欧美在线高清| 欧美视频在线观看视频极品| 欧美专区在线播放| 国产精品国产三级国产专区53| 亚洲国产精品成人综合| 欧美视频中文字幕| 亚洲黄色在线看| 国产精品视频久久一区| 亚洲精品一区在线观看| 国产日韩精品一区二区| 一级成人国产| 在线电影一区| 久久福利资源站| 在线一区免费观看| 欧美精品1区2区| 亚洲国产激情| 国产一区二区三区在线观看视频| 亚洲午夜激情网页|