0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

TinyML推動深度學(xué)習(xí)和人工智能發(fā)展

姚小熊27 ? 來源:TechWeb.com.cn ? 作者:TechWeb.com.cn ? 2020-11-03 14:58 ? 次閱讀

TinyML是深度學(xué)習(xí)人工智能領(lǐng)域的最新技術(shù)。它帶來了在隨處可見的微控制器(幾乎是最小的電子芯片)中運(yùn)行機(jī)器學(xué)習(xí)模型的能力。

微控制器是我們每天使用的許多設(shè)備的大腦。從電視遙控器到電梯再到智能揚(yáng)聲器,它們無處不在??梢园l(fā)射遙測數(shù)據(jù)的多個(gè)傳感器連接到微控制器。執(zhí)行器,例如開關(guān)和電動機(jī),也連接到同一微控制器。它帶有嵌入式代碼,可以從傳感器獲取數(shù)據(jù)并控制執(zhí)行器。

TinyML的興起標(biāo)志著終端用戶消費(fèi)人工智能方式的重大轉(zhuǎn)變。來自硬件和軟件行業(yè)的供應(yīng)商正在合作將人工智能模型引入微控制器。

在電子設(shè)備中運(yùn)行復(fù)雜的深度學(xué)習(xí)模型的能力開辟了許多途徑。TinyML不需要邊緣、云或互聯(lián)網(wǎng)連接。它在同一個(gè)微控制器上本地運(yùn)行,該微控制器具有管理連接的傳感器和執(zhí)行器的邏輯。

TinyML的演變

第1階段-云中的AI

在AI的早期,機(jī)器學(xué)習(xí)模型是在云中訓(xùn)練和托管的。運(yùn)行AI所需的強(qiáng)大計(jì)算能力使云成為理想的選擇。開發(fā)人員和數(shù)據(jù)科學(xué)家利用高端CPUGPU訓(xùn)練模型,然后托管它們以進(jìn)行推理。每個(gè)消耗AI的應(yīng)用程序都與云對話。該應(yīng)用程序?qū)⑴c微控制器通信以管理傳感器和執(zhí)行器。

第二階段-邊緣人工智能

雖然云仍然是人工智能的邏輯家園,但它確實(shí)在消耗深度學(xué)習(xí)模型的同時(shí)引入了延遲。想象一下,每次與智能揚(yáng)聲器通話時(shí),請求都會被云處理。往返行程中的延誤扼殺了體驗(yàn)。其他場景,如工業(yè)自動化、智能醫(yī)療、聯(lián)網(wǎng)車輛等,都要求人工智能模型在本地運(yùn)行。

邊緣計(jì)算(云和本地物聯(lián)網(wǎng)設(shè)備之間的管道)已成為在本地托管AI模型的理想選擇。在邊緣運(yùn)行的AI不會遭受在云中運(yùn)行相同AI所帶來的延遲。

但是,鑒于邊緣資源有限,培訓(xùn)和再培訓(xùn)模型仍然需要云。可以在邊緣托管經(jīng)過訓(xùn)練的模型,以進(jìn)行推理(使用機(jī)器學(xué)習(xí)模型的過程),而不用于訓(xùn)練。因此,在云中訓(xùn)練模型并將其部署在邊緣變得很普遍。這種方法提供了兩全其美的優(yōu)勢-用于訓(xùn)練的強(qiáng)大計(jì)算環(huán)境(云)和用于推理的低延遲托管環(huán)境(邊緣)。

在邊緣使用AI時(shí),微控制器從連接的傳感器獲取遙測,然后將遙測發(fā)送到本地部署的模型以通過應(yīng)用程序進(jìn)行推理。然后,模型返回輸入數(shù)據(jù)的預(yù)測或分類,用于確定后續(xù)步驟。

階段3-微控制器中的AI

雖然在許多情況下在邊緣運(yùn)行AI是一個(gè)完美的解決方案,但是在某些情況下,部署邊緣計(jì)算層是不切實(shí)際的。例如,將諸如智能揚(yáng)聲器和遙控器之類的消費(fèi)類設(shè)備連接到邊緣是過大的選擇。這增加了設(shè)備的總擁有成本和供應(yīng)商的支持成本。但是這些消費(fèi)類設(shè)備是注入AI功能的溫床。

工業(yè)場景中,預(yù)測性維護(hù)已成為設(shè)備的重要組成部分。昂貴的機(jī)械設(shè)備需要嵌入能夠?qū)崟r(shí)檢測異常的機(jī)器學(xué)習(xí)模型,以提供預(yù)測性維護(hù)。通過主動檢測故障,客戶可以節(jié)省數(shù)百萬美元的維護(hù)成本。

直接在微控制器中嵌入AI成為消費(fèi)和工業(yè)物聯(lián)網(wǎng)場景的關(guān)鍵。這種方法不依賴于外部應(yīng)用程序,邊緣計(jì)算層或云。AI模型與嵌入到微控制器的嵌入式代碼一起運(yùn)行。它成為提供無與倫比的速度的整體邏輯的組成部分。

傳統(tǒng)上,機(jī)器學(xué)習(xí)模型始終部署在資源豐富的環(huán)境中。由于TinyML模型可以嵌入微控制器中,因此它們不會占用大量資源。這種方法是將AI注入物聯(lián)網(wǎng)設(shè)備的最有效,最具成本效益的方法。

TinyML不斷發(fā)展的生態(tài)系統(tǒng)

盡管TinyML尚處于起步階段,但正在形成一個(gè)充滿活力的生態(tài)系統(tǒng)。電子芯片和物聯(lián)網(wǎng)套件制造商(例如Adafruit,聯(lián)發(fā)科技,Arduino和STM)正在其設(shè)備中支持TinyML。微軟的Azure Sphere(安全微控制器)也可以運(yùn)行TinyML模型。TensorFlow Lite是流行的開源深度學(xué)習(xí)框架的變體,可以移植到支持的設(shè)備上。另一個(gè)開源機(jī)器學(xué)習(xí)編譯器和運(yùn)行時(shí)Apache TVM也可以用于將模型轉(zhuǎn)換為TinyML。

Always AI、Cartesiam、EdgeImpulse、OctoML和Queexo等新興的AutoML和TinyML平臺正在構(gòu)建工具和開發(fā)環(huán)境,以簡化針對微控制器的訓(xùn)練和優(yōu)化模型的過程。

TinyML使AI無處不在,并可供消費(fèi)者使用。它將為我們每天使用的數(shù)百萬種設(shè)備帶來智能。
責(zé)任編輯:YYX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 微控制器
    +關(guān)注

    關(guān)注

    48

    文章

    7552

    瀏覽量

    151426
  • 人工智能
    +關(guān)注

    關(guān)注

    1791

    文章

    47279

    瀏覽量

    238510
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8418

    瀏覽量

    132646
  • 深度學(xué)習(xí)
    +關(guān)注

    關(guān)注

    73

    文章

    5503

    瀏覽量

    121169
收藏 人收藏

    評論

    相關(guān)推薦

    嵌入式和人工智能究竟是什么關(guān)系?

    人工智能的結(jié)合,無疑是科技發(fā)展中的一場革命。在人工智能硬件加速中,嵌入式系統(tǒng)以其獨(dú)特的優(yōu)勢和重要性,發(fā)揮著不可或缺的作用。通過深度學(xué)習(xí)和神
    發(fā)表于 11-14 16:39

    LLM技術(shù)對人工智能發(fā)展的影響

    隨著人工智能技術(shù)的飛速發(fā)展,大型語言模型(LLM)技術(shù)已經(jīng)成為推動AI領(lǐng)域進(jìn)步的關(guān)鍵力量。LLM技術(shù)通過深度學(xué)習(xí)和自然語言處理技術(shù),使得機(jī)器
    的頭像 發(fā)表于 11-08 09:28 ?377次閱讀

    人工智能、機(jī)器學(xué)習(xí)深度學(xué)習(xí)存在什么區(qū)別

    人工智能指的是在某種程度上顯示出類似人類智能的設(shè)備。AI有很多技術(shù),但其中一個(gè)很大的子集是機(jī)器學(xué)習(xí)——讓算法從數(shù)據(jù)中學(xué)習(xí)。
    發(fā)表于 10-24 17:22 ?2488次閱讀
    <b class='flag-5'>人工智能</b>、機(jī)器<b class='flag-5'>學(xué)習(xí)</b>和<b class='flag-5'>深度</b><b class='flag-5'>學(xué)習(xí)</b>存在什么區(qū)別

    《AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第6章人AI與能源科學(xué)讀后感

    探討了人工智能如何通過技術(shù)創(chuàng)新推動能源科學(xué)的進(jìn)步,為未來的可持續(xù)發(fā)展提供了強(qiáng)大的支持。 首先,書中通過深入淺出的語言,介紹了人工智能在能源領(lǐng)域的基本概念和技術(shù)原理。這使得我對
    發(fā)表于 10-14 09:27

    AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第4章-AI與生命科學(xué)讀后感

    。 4. 對未來生命科學(xué)發(fā)展的展望 在閱讀這一章后,我對未來生命科學(xué)的發(fā)展充滿了期待。我相信,在人工智能技術(shù)的推動下,生命科學(xué)將取得更加顯著的進(jìn)展。例如,在藥物研發(fā)領(lǐng)域,AI技術(shù)將幫助
    發(fā)表于 10-14 09:21

    《AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第二章AI for Science的技術(shù)支撐學(xué)習(xí)心得

    人工智能在科學(xué)研究中的核心技術(shù),包括機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)等。這些技術(shù)構(gòu)成了AI for Science的基石,使得AI能夠處理和分析復(fù)雜的數(shù)據(jù)集,從而發(fā)現(xiàn)隱藏在數(shù)據(jù)中的模式和規(guī)
    發(fā)表于 10-14 09:16

    《AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第一章人工智能驅(qū)動的科學(xué)創(chuàng)新學(xué)習(xí)心得

    ,無疑為讀者鋪設(shè)了一條探索人工智能(AI)如何深刻影響并推動科學(xué)創(chuàng)新的道路。在閱讀這一章后,我深刻感受到了人工智能技術(shù)在科學(xué)領(lǐng)域的廣泛應(yīng)用潛力以及其帶來的革命性變化,以下是我個(gè)人的學(xué)習(xí)
    發(fā)表于 10-14 09:12

    risc-v在人工智能圖像處理應(yīng)用前景分析

    RISC-V和Arm內(nèi)核及其定制的機(jī)器學(xué)習(xí)和浮點(diǎn)運(yùn)算單元,用于處理復(fù)雜的人工智能圖像處理任務(wù)。 四、未來發(fā)展趨勢 隨著人工智能技術(shù)的不斷發(fā)展
    發(fā)表于 09-28 11:00

    名單公布!【書籍評測活動NO.44】AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新

    每個(gè)交叉領(lǐng)域,本書通過案例進(jìn)行了詳盡的介紹,梳理了產(chǎn)業(yè)地圖,并給出了相關(guān)政策啟示。 《AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》適合所有關(guān)注人工智能技術(shù)和產(chǎn)業(yè)發(fā)展的讀者閱讀,特別適合材料科學(xué)
    發(fā)表于 09-09 13:54

    FPGA在人工智能中的應(yīng)用有哪些?

    定制化的硬件設(shè)計(jì),提高了硬件的靈活性和適應(yīng)性。 綜上所述,F(xiàn)PGA在人工智能領(lǐng)域的應(yīng)用前景廣闊,不僅可以用于深度學(xué)習(xí)的加速和云計(jì)算的加速,還可以針對特定應(yīng)用場景進(jìn)行定制化計(jì)算,為人工智能
    發(fā)表于 07-29 17:05

    人工智能、機(jī)器學(xué)習(xí)深度學(xué)習(xí)是什么

    在科技日新月異的今天,人工智能(Artificial Intelligence, AI)、機(jī)器學(xué)習(xí)(Machine Learning, ML)和深度學(xué)習(xí)(Deep Learning,
    的頭像 發(fā)表于 07-03 18:22 ?1299次閱讀

    人工智能深度學(xué)習(xí)的五大模型及其應(yīng)用領(lǐng)域

    隨著科技的飛速發(fā)展,人工智能(AI)技術(shù)特別是深度學(xué)習(xí)在各個(gè)領(lǐng)域展現(xiàn)出了強(qiáng)大的潛力和廣泛的應(yīng)用價(jià)值。深度
    的頭像 發(fā)表于 07-03 18:20 ?4516次閱讀

    人工智能和機(jī)器學(xué)習(xí)的頂級開發(fā)板有哪些?

    機(jī)器學(xué)習(xí)(ML)和人工智能(AI)不再局限于高端服務(wù)器或云平臺。得益于集成電路(IC)和軟件技術(shù)的新發(fā)展,在微型控制器和微型計(jì)算機(jī)上實(shí)現(xiàn)機(jī)器學(xué)習(xí)算法和
    的頭像 發(fā)表于 02-29 18:59 ?830次閱讀
    <b class='flag-5'>人工智能</b>和機(jī)器<b class='flag-5'>學(xué)習(xí)</b>的頂級開發(fā)板有哪些?

    嵌入式人工智能的就業(yè)方向有哪些?

    于工業(yè)、農(nóng)業(yè)、醫(yī)療、城市建設(shè)、金融、航天軍工等多個(gè)領(lǐng)域。在新時(shí)代發(fā)展背景下,嵌入式人工智能已是大勢所趨,成為當(dāng)前最熱門的AI商業(yè)化途徑之一。
    發(fā)表于 02-26 10:17

    推動人工智能安全發(fā)展

    近年來,國家高度重視人工智能安全發(fā)展,逐步完善相關(guān)政策法規(guī)。國務(wù)院印發(fā)《新一代人工智能發(fā)展規(guī)劃》提出面向2030年我國新一代人工智能
    的頭像 發(fā)表于 01-04 16:32 ?1157次閱讀