0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

比1納秒光速更快的圖像識別技術(shù)研究

新機器視覺 ? 來源:FUTURE ? 作者:Farshid Ashtiani ? 2022-07-06 10:02 ? 次閱讀

比深度神經(jīng)網(wǎng)絡(luò)速度還快的是什么?

或許光子DNN可以回答這個問題。

現(xiàn)在,美國研究者開發(fā)的一個光子神經(jīng)網(wǎng)絡(luò)(photonic deep neural network,PDNN),讓圖像識別僅需1納秒。

7fd57e30-ee47-11ec-ba43-dac502259ad0.png

1納秒是什么概念?它等于10-9秒,這與最先進(jìn)的微芯片時鐘周期(最小的時間單位)相當(dāng)。

此外,研究者測試發(fā)現(xiàn),PDNN對圖像進(jìn)行2分類和4分類的準(zhǔn)確率分別高達(dá)93.8%和89.8%。

誠然,如今的大型多層神經(jīng)網(wǎng)絡(luò)高效且運算能力很強,但其也受到硬件的限制,往往需要消耗大量的電力資源等。

而賓夕法尼亞大學(xué)的工程師們研發(fā)的PDNN,能夠直接分析圖像,不需要時鐘、傳感器或大型存儲模塊,以有效降低耗能。相關(guān)研究成果于近日登上了Nature雜志。

光子DNN比傳統(tǒng)DNN更快

和傳統(tǒng)DNN相比,光子DNN的原理和性能有何不同?

先來看看傳統(tǒng)DNN:

圖a是傳統(tǒng)DNN的結(jié)構(gòu)示意圖,包括一個數(shù)據(jù)排列單元,然后是輸入層、幾個隱藏層,和一個提供分類輸出的輸出層。

圖b展示了傳統(tǒng)N輸入神經(jīng)元的結(jié)構(gòu):輸入的線性加權(quán)和,通過一個非線性激活函數(shù),產(chǎn)生神經(jīng)元的輸出。

7fe8d944-ee47-11ec-ba43-dac502259ad0.jpg

圖c和圖d分別是一個PDNN芯片的神經(jīng)網(wǎng)絡(luò)示意圖和N輸入神經(jīng)元結(jié)構(gòu)。

首先在一個5×6光柵耦合器上形成輸入圖像,然后將其排列成4個重疊的子圖像,子圖像的像素被傳送到第一層神經(jīng)元,形成一個卷積層。

后面的神經(jīng)元與它們的前一層完全連接,該網(wǎng)絡(luò)產(chǎn)生2個輸出,可最多為4種圖像信息分類。

對于這些神經(jīng)元,其輸入都是光學(xué)信號。

7ffefc9c-ee47-11ec-ba43-dac502259ad0.png

在每個神經(jīng)元中,線性計算是通過光學(xué)方式進(jìn)行的,而非線性激活函數(shù)是通過光電子方式實現(xiàn)的,從而可使分類時間低于570ps(=0.57ns)。

論文的通訊作者,電氣工程師Firooz Aflatouni對這個PDNN的性能補充描述道:它每秒可以對近18億張圖像進(jìn)行分類,而傳統(tǒng)的視頻幀率是每秒24至120幀。

這里的PDNN芯片電路被集成在僅9.3 mm2 的面積內(nèi),不需要時鐘、傳感器以及大型存儲模塊。

一個激光器被耦合到芯片內(nèi),為各個神經(jīng)元提供光源;該芯片包含兩個5×6的光柵耦合器,分別作為輸入像素陣列和校準(zhǔn)陣列。

80195254-ee47-11ec-ba43-dac502259ad0.png

不過,均勻分布的供給光每個神經(jīng)元光提供了相同的輸出范圍,顯然這將允許將其擴展到更大規(guī)模的PDNN。

光子DNN芯片的圖像分類測試

研究者們讓這個PDNN微芯片識別手寫字母。

一組實驗測試了PDNN芯片的二分類性能:需要對共計216個「p」和「d」字母組成的數(shù)據(jù)集進(jìn)行分類。

該芯片準(zhǔn)確率高于93.8%。((92.8%+94.9%)/2)

802d282e-ee47-11ec-ba43-dac502259ad0.png

另一組實驗測試了PDNN芯片的四分類性能:需對共計432個「p」、「d」、「a」、「t」字母組成的數(shù)據(jù)集進(jìn)行分類。

該芯片分類準(zhǔn)確率高于89.8%。

8056ca1c-ee47-11ec-ba43-dac502259ad0.png

這些結(jié)果表明,即使有更多的類(如分四類情況),且存在打印機引起的變化和噪聲,PDNN芯片仍取得了較高的分類精度。

為了比較這個PDNN和傳統(tǒng)DNN的圖像分類準(zhǔn)確性,研究者還測試了在Python中使用Keras庫實現(xiàn)的190個神經(jīng)元組成的DNN,結(jié)果顯示:它在相同圖像上的分類準(zhǔn)確率為96%。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2552

    文章

    51292

    瀏覽量

    755171
  • 芯片
    +關(guān)注

    關(guān)注

    456

    文章

    51023

    瀏覽量

    425423
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4776

    瀏覽量

    100952

原文標(biāo)題:Nature | 低于1納秒光速圖像識別

文章出處:【微信號:vision263com,微信公眾號:新機器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    AI圖像識別攝像機

    隨著科技的迅猛發(fā)展,人工智能(AI)在各個領(lǐng)域的應(yīng)用越來越廣泛,其中圖像識別技術(shù)尤為引人注目。AI圖像識別攝像機作為這一技術(shù)的重要應(yīng)用之一,正在逐步改變我們的生活和工作方式。什么是AI
    的頭像 發(fā)表于 11-08 10:38 ?307次閱讀
    AI<b class='flag-5'>圖像識別</b>攝像機

    圖像檢測和圖像識別的原理、方法及應(yīng)用場景

    圖像檢測和圖像識別是計算機視覺領(lǐng)域的兩個重要概念,它們在許多應(yīng)用場景中發(fā)揮著關(guān)鍵作用。 1. 定義 1.1 圖像檢測 圖像檢測(Object
    的頭像 發(fā)表于 07-16 11:19 ?4654次閱讀

    圖像識別算法都有哪些方法

    圖像識別算法是計算機視覺領(lǐng)域的核心任務(wù)之一,它涉及到從圖像中提取特征并進(jìn)行分類、識別和分析的過程。隨著深度學(xué)習(xí)技術(shù)的不斷發(fā)展,圖像識別算法已
    的頭像 發(fā)表于 07-16 11:14 ?5810次閱讀

    圖像識別算法的提升有哪些

    引言 圖像識別是計算機視覺領(lǐng)域的核心任務(wù)之一,旨在使計算機能夠自動地識別和理解圖像中的內(nèi)容。隨著計算機硬件的發(fā)展和深度學(xué)習(xí)技術(shù)的突破,圖像識別
    的頭像 發(fā)表于 07-16 11:12 ?689次閱讀

    圖像識別算法的優(yōu)缺點有哪些

    圖像識別算法是一種利用計算機視覺技術(shù)圖像進(jìn)行分析和理解的方法,它在許多領(lǐng)域都有廣泛的應(yīng)用,如自動駕駛、醫(yī)療診斷、安全監(jiān)控等。然而,圖像識別算法也存在一些優(yōu)缺點。 一、
    的頭像 發(fā)表于 07-16 11:09 ?1783次閱讀

    圖像識別算法的核心技術(shù)是什么

    圖像識別算法是計算機視覺領(lǐng)域的一個重要研究方向,其目標(biāo)是使計算機能夠像人類一樣理解和識別圖像中的內(nèi)容。圖像識別算法的核心
    的頭像 發(fā)表于 07-16 11:02 ?689次閱讀

    圖像識別技術(shù)包括自然語言處理嗎

    圖像識別技術(shù)與自然語言處理是人工智能領(lǐng)域的兩個重要分支,它們在很多方面有著密切的聯(lián)系,但也存在一些區(qū)別。 一、圖像識別技術(shù)與自然語言處理的關(guān)系 1.1
    的頭像 發(fā)表于 07-16 10:54 ?889次閱讀

    圖像識別技術(shù)在醫(yī)療領(lǐng)域的應(yīng)用

    一、引言 圖像識別技術(shù)是一種利用計算機視覺技術(shù)圖像進(jìn)行分析和處理的技術(shù)。隨著計算機技術(shù)、人工智
    的頭像 發(fā)表于 07-16 10:48 ?1015次閱讀

    圖像識別技術(shù)的原理是什么

    圖像識別技術(shù)是一種利用計算機視覺和機器學(xué)習(xí)技術(shù)圖像進(jìn)行分析和理解的技術(shù)。它可以幫助計算機識別
    的頭像 發(fā)表于 07-16 10:46 ?1216次閱讀

    圖像識別屬于人工智能嗎

    屬于。圖像識別是人工智能(Artificial Intelligence, AI)領(lǐng)域的一個重要分支。 一、圖像識別概述 1.1 定義 圖像識別是指利用計算機技術(shù)
    的頭像 發(fā)表于 07-16 10:44 ?1222次閱讀

    如何利用CNN實現(xiàn)圖像識別

    卷積神經(jīng)網(wǎng)絡(luò)(CNN)是深度學(xué)習(xí)領(lǐng)域中一種特別適用于圖像識別任務(wù)的神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)。它通過模擬人類視覺系統(tǒng)的處理方式,利用卷積、池化等操作,自動提取圖像中的特征,進(jìn)而實現(xiàn)高效的圖像識別。本文將從CNN的基本原理、構(gòu)建過程、訓(xùn)練策略以
    的頭像 發(fā)表于 07-03 16:16 ?1462次閱讀

    圖像檢測和圖像識別的區(qū)別是什么

    圖像檢測和圖像識別是計算機視覺領(lǐng)域的兩個重要研究方向,它們在許多應(yīng)用場景中都有著廣泛的應(yīng)用。盡管它們在某些方面有相似之處,但它們之間還是存在一些明顯的區(qū)別。本文將從多個角度對圖像檢測和
    的頭像 發(fā)表于 07-03 14:41 ?1112次閱讀

    神經(jīng)網(wǎng)絡(luò)在圖像識別中的應(yīng)用

    隨著人工智能技術(shù)的飛速發(fā)展,神經(jīng)網(wǎng)絡(luò)在圖像識別領(lǐng)域的應(yīng)用日益廣泛。神經(jīng)網(wǎng)絡(luò)以其強大的特征提取和分類能力,為圖像識別帶來了革命性的進(jìn)步。本文將詳細(xì)介紹神經(jīng)網(wǎng)絡(luò)在圖像識別中的應(yīng)用案例,包括
    的頭像 發(fā)表于 07-01 14:19 ?736次閱讀

    瑞芯微圖像識別開發(fā)板技術(shù)交流

    有一個瑞芯微圖像識別開發(fā)板的技術(shù)開發(fā)需求,歡迎洽談
    發(fā)表于 05-29 18:41

    圖像識別技術(shù)原理 圖像識別技術(shù)的應(yīng)用領(lǐng)域

    圖像識別技術(shù)是一種通過計算機對圖像進(jìn)行分析和理解的技術(shù)。它借助計算機視覺、模式識別、人工智能等相關(guān)技術(shù)
    的頭像 發(fā)表于 02-02 11:01 ?2619次閱讀