據(jù)麥姆斯咨詢介紹,快速、高分辨率、低噪聲的3D成像技術(shù)在空間成像、生物醫(yī)學顯微鏡、智慧安防、工業(yè)檢測、文化遺產(chǎn)保護等眾多領(lǐng)域得到廣泛應用。傳統(tǒng)的全光場成像因具有出色的時間分辨率被視為最有前途的3D成像技術(shù)之一:一次拍攝完成,以3000萬像素的分辨率每秒拍攝7幀,或以100萬像素的分辨率每秒拍攝180幀,無需多個傳感器、近場技術(shù)、耗時掃描和干涉技術(shù)。然而,傳統(tǒng)的全光場成像會損失分辨率,這通常是不可接受的。
來自歐洲的一支研究團隊打破了這種局限,將全新的基礎(chǔ)性方法與上一代硬軟件解決方案相結(jié)合?;舅悸肥峭ㄟ^使用新型傳感器和測量協(xié)議來利用存儲在光相關(guān)性中的信息,實現(xiàn)一項非常艱巨的任務(wù):高速(10-100fps)量子全光場成像(Quantum Plenoptic Imaging,縮寫為QPI),具有超低噪聲、出色的分辨率和景深。
這項成像技術(shù)旨在成為第一項實用“量子”成像技術(shù),突破了經(jīng)典成像方式的極限。除此之外,該技術(shù)的量子特性還允許從極低光子通量下光的相關(guān)信息中提取3D圖像信息,從而減少場景對照明的需求。
該項研究工作是基于高速和高分辨率量子三維成像(Qu3D)項目基礎(chǔ)而開展起來的,由2019 QuantERA發(fā)起,專家來自意大利、捷克、瑞士和希臘的科研機構(gòu)和工業(yè)合作伙伴。
最先進的全光場相機通過在標準數(shù)碼相機的主鏡頭和傳感器之間插入微透鏡陣列(MLA)來實現(xiàn)方向探測(見圖1a)。該傳感器獲取允許通過光探測物體和透鏡位置的復合信息。但由于結(jié)構(gòu)(使用微透鏡陣列)和物理(高斯極限)原因,圖像分辨率與獲得的方向信息成反比。因此,基于簡單的光強測量器件,衍射極限處的全光場成像被認為是不可能實現(xiàn)的。
近日,參與Qu3D項目的意大利國立核物理研究所(INFN)小組提出了一種新技術(shù),稱為“關(guān)聯(lián)全光場成像”(Correlation Plenoptic Imaging,縮寫為CPI),能夠解決現(xiàn)有全光場器件的分辨率缺陷,并保持重新聚焦能力和三維重建的優(yōu)勢。CPI可以基于強度測量,也可以基于光子探測,這由光源決定。實際上,CPI可以基于表征混沌源和糾纏光子束的時空相關(guān)性,對兩個不相交傳感器的空間和方向信息進行編碼,如圖1b所示。
為了提高CPI在采集速度和數(shù)據(jù)處理的時間精準性,該研究團隊采用了專用的先進傳感器和超高速計算平臺。
先進傳感器基于SPAD技術(shù)。當光電二極管的反向偏置電壓高于擊穿電壓,一個光子撞擊到光敏區(qū)域并產(chǎn)生一個電子-空穴對,進而觸發(fā)次級載流子的雪崩,并在很短的時間尺度(皮秒)產(chǎn)生大電流。
基于QPI的要求,研究人員選擇了瑞士格桑聯(lián)邦理工學院(EPFL)AQUA實驗室開發(fā)的SwisSPAD2陣列,像素分辨率是512 x 512(,這是迄今為止最寬、最先進的SPAD陣列之一。該傳感器內(nèi)部結(jié)構(gòu)由兩個256 x 512的SPAD陣列組成,以減少信號線上的負載,提高運行速度。
在與SwissSPAD2集成的QPI器件中,單幀采集數(shù)據(jù)速率約為26 Gb/s,這已經(jīng)超出了標準數(shù)據(jù)總線的能力,對硬件和軟件設(shè)計都提出了很大的挑戰(zhàn)?;谶@樣的挑戰(zhàn)性目標,研究人員對市售的商用產(chǎn)品解決方案進行了初步分析,以確定一組滿足QPI對計算能力和可移植性要求的一系列加速器件。
英偉達(NVIDIA)的Jetson Xavier AGX開發(fā)套件提供,被認為是最適合的計算平臺。Jetson Xavier AGX提供了令人鼓舞的性能/集成比、低功耗和非常有趣的計算能力。
通過專用量子和經(jīng)典圖像處理技術(shù),如基于壓縮傳感的新穎數(shù)學方法、量子層析成像與量子Fisher信息,可進一步減少收集時間。在論文中,作者討論了壓縮傳感、全光場層析成像、量子層析成像和量子Fisher信息等算法的作用和實驗數(shù)據(jù)。
為了實現(xiàn)實用的量子3D成像,研究人員提出了具有挑戰(zhàn)性的研究方向:在不犧牲高信噪比(SNR)、高分辨率和大景深等優(yōu)勢的前提下,盡可能降低采集速度。研究人員在經(jīng)典成像和量子成像兩方面都取得了重大進展,提高了全光場成像性能,極大地加快了量子成像,從而促進了量子全光場相機的落地。
研究人員還雄心勃勃地計劃將量子成像的范圍擴展到其他科學領(lǐng)域,并為新的市場機遇和應用開辟道路,如用于生物醫(yī)學成像的3D顯微鏡,以及用于智慧安防、空間成像和工業(yè)檢測的新型設(shè)備(3D成像、重新聚焦和距離檢測能力增強的量子數(shù)碼相機)。這項合作跨越了眾多學科(例如量子成像、超高速相機、GPU的低水平編程、壓縮傳感、量子信息理論和信號處理)的傳統(tǒng)界限。
編輯:jq
-
3D
+關(guān)注
關(guān)注
9文章
2878瀏覽量
107555 -
噪聲
+關(guān)注
關(guān)注
13文章
1122瀏覽量
47416 -
gpu
+關(guān)注
關(guān)注
28文章
4740瀏覽量
128953 -
顯微鏡
+關(guān)注
關(guān)注
0文章
563瀏覽量
23043
原文標題:歐洲研究團隊推出全新3D成像技術(shù):量子全光場成像QPI
文章出處:【微信號:MEMSensor,微信公眾號:MEMS】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論