0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

端側(cè) AI 芯片:終端智能落地的核心引擎

Carol Li ? 來源:電子發(fā)燒友網(wǎng) ? 作者:李彎彎 ? 2025-04-14 02:11 ? 次閱讀
電子發(fā)燒友網(wǎng)報道(文 / 李彎彎)端側(cè) AI 芯片,是專門為在諸如智能手機、IoT 設(shè)備、自動駕駛汽車等終端設(shè)備上,高效運行人工智能算法而設(shè)計的處理器。通過硬件級優(yōu)化,它們能夠?qū)崿F(xiàn)低功耗、高實時性的 AI 計算,構(gòu)成了端側(cè) AI 落地的核心硬件基礎(chǔ)。

為何需要端側(cè) AI 芯片?隨著 AI 技術(shù)不斷發(fā)展,傳統(tǒng)芯片暴露出局限性。CPUGPU 雖通用性強,但能效比較低,難以契合移動設(shè)備對功耗的嚴苛要求;依賴云端則會引發(fā)延遲、隱私以及網(wǎng)絡(luò)穩(wěn)定性等問題。與之相比,專用端側(cè) AI 芯片優(yōu)勢顯著,具備高能效比、低延遲、隱私安全保障以及離線運行能力等特性。

端側(cè) AI 芯片的核心技術(shù)涵蓋架構(gòu)設(shè)計與關(guān)鍵技術(shù)創(chuàng)新等方面。在架構(gòu)設(shè)計上,NPU(神經(jīng)網(wǎng)絡(luò)處理單元)堪稱端側(cè) AI 芯片的核心。它是專為神經(jīng)網(wǎng)絡(luò)設(shè)計的加速器,像華為昇騰 NPU、Apple 神經(jīng)引擎等,支持并行計算以及 INT8/FP16 低精度運算。

再者是異構(gòu)計算架構(gòu),現(xiàn)代端側(cè) AI 芯片普遍采用該架構(gòu),集成了 CPU、GPU、NPU、DSP數(shù)字信號處理器)等多種計算單元,以應(yīng)對各類不同的計算任務(wù),高通 Hexagon 便是典型代表。

在關(guān)鍵技術(shù)創(chuàng)新方面,量化計算可支持 INT4/INT8 低精度運算,有效提升能效,聯(lián)發(fā)科 APU 就是范例;稀疏化加速技術(shù)能夠跳過零值權(quán)重計算,例如特斯拉 Dojo 芯片;存算一體技術(shù)可減少數(shù)據(jù)搬運功耗(即存內(nèi)計算,如存算一體芯片);動態(tài)調(diào)度技術(shù)能夠依據(jù)任務(wù)負載動態(tài)分配算力,ARM Ethos NPU 便是如此。

主流的端側(cè) AI 芯片廠商及產(chǎn)品有哪些?在此列舉部分廣為人知的廠商及其產(chǎn)品。華為海思昇騰(Ascend)系列,屬于面向邊緣推理的 AI 芯片,如 Ascend 310;麒麟 SoC 集成了 NPU,像麒麟 9000,可支持手機端 AI 任務(wù)。

高通驍龍移動平臺,部分型號支持端側(cè) AI,比如驍龍 8 Gen 2 集成了 Hexagon 處理器,算力超過 60 TOPS;QCS 系列則是面向物聯(lián)網(wǎng)設(shè)備的 AI 芯片,例如 QCS8250 支持 15 TOPS 算力。

聯(lián)發(fā)科天璣系列集成了 AI 處理器,可支持端側(cè) AI 任務(wù)。

蘋果 A 系列 / M 系列芯片集成了神經(jīng)網(wǎng)絡(luò)引擎,像 A17 Pro 算力達 35 TOPS,M2 芯片算力達 15.8 TOPS。

三星 Exynos 系列,例如 Exynos Auto V 系列,是面向車用的 AI 芯片,算力超過 10 TOPS。

英特爾 Movidius VPU 專為視覺 AI 優(yōu)化,比如 Myriad X 支持 4 TOPS 算力。

地平線(Horizon Robotics)征程系列面向自動駕駛和智能座艙,如征程 5 算力達 128 TOPS。

寒武紀(Cambricon)MLU 系列,像 MLU220 支持 8 TOPS 算力,面向邊緣推理。

全志科技(Allwinner)V/R 系列,例如 V853 集成了 NPU,算力 1.2 TOPS,適用于智能攝像頭。

瑞芯微Rockchip)RK3588 內(nèi)置 6 TOPS NPU,支持旗艦級邊緣計算。

當前,端側(cè) AI 芯片的發(fā)展面臨諸多挑戰(zhàn):在能效平衡方面,移動設(shè)備需要在 1W 以下功耗實現(xiàn) TOPS 級算力;算法適配層面,芯片需要支持動態(tài)稀疏化、混合精度等前沿算法;開發(fā)門檻上,存在廠商專用工具鏈(如華為 MindSpore Lite)與通用框架(TensorFlow Lite)的兼容性問題;碎片化生態(tài)方面,不同廠商的 NPU 指令集和編譯器存在差異,導(dǎo)致移植成本居高不下。

從發(fā)展趨勢來看,隨著 AI 模型復(fù)雜度提升,端側(cè) AI 芯片的算力會持續(xù)增強,同時維持低功耗狀態(tài)。端側(cè) AI 芯片將支持多模態(tài)數(shù)據(jù)(如圖像、語音、傳感器數(shù)據(jù))的融合處理,從而拓展更為豐富的應(yīng)用場景。輕量化模型(如 MobileNet、EfficientNet)和神經(jīng)架構(gòu)搜索(NAS)技術(shù)將進一步優(yōu)化端側(cè) AI 的性能。端側(cè) AI 芯片與云端 AI 的協(xié)同作業(yè)將成為主流模式,復(fù)雜任務(wù)交由云端處理,實時任務(wù)則由端側(cè)設(shè)備完成。

總而言之,端側(cè) AI 芯片是推動 AI 技術(shù)在終端設(shè)備落地的核心硬件,其發(fā)展將對智能手機、智能穿戴、自動駕駛、工業(yè)物聯(lián)網(wǎng)等眾多領(lǐng)域產(chǎn)生深遠影響。盡管目前面臨一些挑戰(zhàn),但未來端側(cè) AI 芯片必將朝著更高算力、更低功耗、更強安全性以及更豐富應(yīng)用場景的方向邁進。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI芯片
    +關(guān)注

    關(guān)注

    17

    文章

    1961

    瀏覽量

    35645
收藏 人收藏

    評論

    相關(guān)推薦
    熱點推薦

    首創(chuàng)開源架構(gòu),天璣AI開發(fā)套件讓側(cè)AI模型接入得心應(yīng)手

    AI巨頭強強聯(lián)手,勢必為智能體化AI體驗時代按下超級加速鍵。 AI終端的下一步是“普適智能”,而
    發(fā)表于 04-13 19:52

    炬芯科技探索側(cè)AI技術(shù)與應(yīng)用

    隨著人工智能技術(shù)的迅猛發(fā)展,AI應(yīng)用正從云端向終端迅速擴張。側(cè)AI
    的頭像 發(fā)表于 03-27 14:58 ?349次閱讀

    AI大模型側(cè)部署正當時:移遠端側(cè)AI大模型解決方案,激活場景智能新范式

    AI大模型解決方案備受矚目,為AI設(shè)備的革新注入了澎湃動力。 萬億級市場藍海顯現(xiàn),側(cè)AI大模型加速落地
    發(fā)表于 03-27 11:26 ?159次閱讀
    <b class='flag-5'>AI</b>大模型<b class='flag-5'>端</b>側(cè)部署正當時:移遠端<b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>大模型解決方案,激活場景<b class='flag-5'>智能</b>新范式

    AI大模型側(cè)部署正當時:移遠端側(cè)AI大模型解決方案,激活場景智能新范式

    AI大模型解決方案備受矚目,為AI設(shè)備的革新注入了澎湃動力。萬億級市場藍海顯現(xiàn),側(cè)AI大模型加速落地
    的頭像 發(fā)表于 03-26 19:05 ?304次閱讀
    <b class='flag-5'>AI</b>大模型<b class='flag-5'>端</b>側(cè)部署正當時:移遠端<b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>大模型解決方案,激活場景<b class='flag-5'>智能</b>新范式

    兩大芯片廠商比拼側(cè)AI音頻芯片,高算力藍牙6.0成亮點

    (電子發(fā)燒友網(wǎng)綜合報道)隨著人工智能技術(shù)的飛速發(fā)展,AI芯片作為其核心硬件支撐,正逐漸從云端向側(cè)
    的頭像 發(fā)表于 03-24 08:51 ?1304次閱讀

    側(cè) AI 音頻處理器:集成音頻處理與 AI 計算能力的創(chuàng)新芯片

    電子發(fā)燒友網(wǎng)綜合報道:側(cè) AI 音頻處理器是專為智能物聯(lián)網(wǎng)(AIoT)側(cè)設(shè)備設(shè)計,集成了人工
    的頭像 發(fā)表于 02-16 00:13 ?1912次閱讀

    廣和通Fibocom AI Stack:加速側(cè)AI部署新紀元

    、海量模型以及全方位的支持與服務(wù)于一體,為智能設(shè)備提供了AI解決方案。為適應(yīng)多樣化的側(cè)
    的頭像 發(fā)表于 01-13 11:32 ?837次閱讀

    聯(lián)發(fā)科技攜手Cocos共建側(cè)生成式AI游戲開發(fā)生態(tài),推動行業(yè)升級

    捷更高效的應(yīng)用開發(fā)體驗,助力全球億萬用戶享受全新的智能互動體驗。 隨著智能終端性能的不斷提升,側(cè)生成式
    的頭像 發(fā)表于 01-10 09:24 ?344次閱讀

    炬芯科技發(fā)布ATS323X系列側(cè)AI音頻芯片

    面向低延遲私有無線音頻領(lǐng)域的創(chuàng)新之作:ATS323X系列芯片,這是全新一代基于MMSCIM的側(cè)AI音頻芯片,目前該
    的頭像 發(fā)表于 12-12 14:58 ?714次閱讀

    廣和通開啟側(cè)AI新時代

    AI發(fā)展正酣,隨著終端芯片算力越來越高、側(cè)模型能力越來越強、實時響應(yīng)及隱私保護的
    的頭像 發(fā)表于 12-12 10:35 ?603次閱讀

    把握關(guān)鍵節(jié)點,美格智能持續(xù)推動側(cè)AI規(guī)模化拓展

    當前,AI大模型走向側(cè)已經(jīng)是大勢所趨,側(cè)AI的發(fā)展將推動人工
    的頭像 發(fā)表于 11-26 01:00 ?461次閱讀
    把握關(guān)鍵節(jié)點,美格<b class='flag-5'>智能</b>持續(xù)推動<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>規(guī)模化拓展

    把握關(guān)鍵節(jié)點,美格智能持續(xù)推動側(cè)AI規(guī)?;卣?/a>

    當前,AI大模型走向側(cè)已經(jīng)是大勢所趨,側(cè)AI的發(fā)展將推動人工
    的頭像 發(fā)表于 11-25 16:45 ?629次閱讀
    把握關(guān)鍵節(jié)點,美格<b class='flag-5'>智能</b>持續(xù)推動<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>規(guī)?;卣? />    </a>
</div>                              <div   id=

    側(cè)AI,風(fēng)起移動智能計算

    新一代驍龍旗艦芯片側(cè)AI的繁榮肇始
    的頭像 發(fā)表于 11-22 09:55 ?2741次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>,風(fēng)起移動<b class='flag-5'>智能</b>計算

    側(cè)AI浪潮已來!炬芯科技發(fā)布新一代側(cè)AI音頻芯片,能效比和AI算力大幅度提升

    電子發(fā)燒友原創(chuàng) 章鷹 ? 11月5日,在深圳會展中心7號館內(nèi),炬芯科技董事長兼CEO周正宇博士帶來了《側(cè)AI芯片的未來》演講,他對
    的頭像 發(fā)表于 11-06 09:11 ?3560次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>浪潮已來!炬芯科技發(fā)布新一代<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>音頻<b class='flag-5'>芯片</b>,能效比和<b class='flag-5'>AI</b>算力大幅度提升

    創(chuàng)星未來訪談|時擎科技:側(cè)智能芯片領(lǐng)域的新銳力量

    本文轉(zhuǎn)載自:長三角資本市場服務(wù)基地在半導(dǎo)體產(chǎn)業(yè)和人工智能產(chǎn)業(yè)的融合驅(qū)動作用下,AI芯片行業(yè)正進入發(fā)展“快車道”。由于邊設(shè)備大部分都有AI
    的頭像 發(fā)表于 09-24 08:03 ?856次閱讀
    創(chuàng)星未來訪談|時擎科技:<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>智能</b><b class='flag-5'>芯片</b>領(lǐng)域的新銳力量

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會員交流學(xué)習(xí)
    • 獲取您個性化的科技前沿技術(shù)信息
    • 參加活動獲取豐厚的禮品