0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

當(dāng)鏡頭設(shè)計遇上數(shù)字孿生

新思科技 ? 來源:未知 ? 2022-12-05 17:40 ? 次閱讀

a0732674-747f-11ed-8abf-dac502259ad0.gif

從醫(yī)療診斷到汽車、智能手機、和視頻監(jiān)控…攝像頭在我們的日常生活中無處不在。所以說如今的數(shù)據(jù)中有一半是圖像和視頻一點都不夸張,而且其中大部分是通過便攜式系統(tǒng)在終端生成的。 與云端相比,端設(shè)備的設(shè)計挑戰(zhàn)仍然很多。比如說,如何盡情用智能手機拍攝精美照片的同時,又不必擔(dān)心電池電量問題呢?自動駕駛系統(tǒng)如何在無需大規(guī)模云數(shù)據(jù)處理的情況下同時分析來自近10個攝像頭的圖像呢? 攝像頭開發(fā)團隊常常遇到的痛點包括不斷變化的規(guī)格、設(shè)計和制造之間的差異,以及設(shè)計和組裝多個組件所帶來的復(fù)雜性,若想更好地設(shè)計出下一代邊緣和普適攝像頭,則需要更新的工具和技術(shù)。數(shù)字孿生恰巧就是這樣一項技術(shù)。 數(shù)字孿生是一項關(guān)鍵的使能技術(shù),不僅適用于飛機或復(fù)雜的發(fā)電廠,還適用于成像系統(tǒng)。數(shù)字孿生能夠通過仿真優(yōu)化產(chǎn)品生命周期,從而實現(xiàn)更高的規(guī)格(避免過度規(guī)格設(shè)定)和過程控制預(yù)測,并支持更早地介入軟件開發(fā)。數(shù)字孿生還能催生出定制成像系統(tǒng),例如無需“始終在線”的高效視頻監(jiān)控攝像頭。 在本文中,我們將介紹數(shù)字孿生如何通過成像仿真助力成像系統(tǒng)實現(xiàn)更好、更精簡的規(guī)格和虛擬測試。

攝像頭系統(tǒng):精密而又復(fù)雜

成像系統(tǒng)是一個多尺度、多重物理量模型,具有多個相互依賴的組件:
  • 鏡頭組從場景中捕捉光子;
  • 圖像信號處理器芯片將原始電子信號轉(zhuǎn)換成具有不同顏色、去噪且人眼可讀的數(shù)字圖像;
  • I/O芯片將成像系統(tǒng)與某個外部組件相連;
最后,成像系統(tǒng)必須能夠提供高質(zhì)量圖像。一般,高質(zhì)量圖像指用數(shù)碼單反相機拍攝的高品質(zhì)圖像。但是,如果將該標(biāo)準(zhǔn)運用于土壤監(jiān)測、醫(yī)療診斷或自動駕駛的圖像,可能會導(dǎo)致出現(xiàn)過高規(guī)格或錯誤的預(yù)期結(jié)果。 下面我們來看看成像系統(tǒng)架構(gòu)師和團隊如何利用新思科技光學(xué)解決方案的成像仿真功能來渲染和優(yōu)化成像系統(tǒng)的預(yù)期成像結(jié)果。

工作流程和結(jié)果

如以下簡化示例所述,現(xiàn)在已經(jīng)可以使用CODE V、LightTools和RSoft光子器件工具來仿真圖像。在該示例中,成像系統(tǒng)包含一個由四個鏡片構(gòu)成的鏡頭組和一個具有微透鏡陣列的1.12微米RGB像素CMOS傳感器。

a0b62528-747f-11ed-8abf-dac502259ad0.png配備四個鏡片和CMOS傳感器的成像系統(tǒng)示例

1. 使用CODE V根據(jù)鏡頭組光學(xué)特性仿真成像結(jié)果 第一步是設(shè)計鏡頭組并生成相應(yīng)的PSF。我們使用CODE V中的圖像仿真(IMS)功能來仿真成像結(jié)果。開發(fā)者可以將任意2D圖像導(dǎo)入到該工具中,然后定義FFT網(wǎng)格大小并計算通過鏡頭后的PSF網(wǎng)格,并可以添加顏色、相對照度參數(shù)和圖像傳感器屬性,如像素大小和像素數(shù)量。IMS將根據(jù)通過CODE V定義和計算的光學(xué)參數(shù)來計算輸入圖像的卷積,并輸出由此得到的圖像。 a0e84972-747f-11ed-8abf-dac502259ad0.png右側(cè)的輸出圖像是輸入圖像與由CODE V計算鏡頭組光學(xué)參數(shù)得到的卷積結(jié)果 然后,開發(fā)者可以在模擬圖像上評估圖像質(zhì)量。通過進一步優(yōu)化鏡頭組,便可以為目標(biāo)應(yīng)用提供所需的圖像質(zhì)量。 2. 使用LightTools和RSoft光子器件工具仿真雜散光 大多數(shù)成像系統(tǒng)都必須經(jīng)過進一步優(yōu)化,以避免出現(xiàn)雜散光而影響預(yù)期的成像品質(zhì)。鬼影和眩光是成像系統(tǒng)中的典型雜散光。開發(fā)者們可以使用RSoft光子器件工具和LightTools來預(yù)測成像系統(tǒng)簡化示例中的鬼影和眩光。由于傳感器的衍射和反射特性,開發(fā)者需要預(yù)測系統(tǒng)中的雜散光。CMOS圖像傳感器通常是微米大小像素的集合,這些像素會產(chǎn)生強衍射譜,因此必須使用RSoft光子器件工具來獲得該表面的光學(xué)特性。 更具體地說,DiffractMOD RCWA是縝密計算橫向周期性器件衍射特性的有效工具。它可以輸出各個衍射級的反射/透射功率、全反射/透射、各個衍射級的振幅/相位/角度,以及仿真域中的場分布。所有結(jié)果都存儲在BSDF文件中,并可以導(dǎo)出到LightTools來做進一步的仿真。 第三步是從CODE V導(dǎo)入鏡頭組幾何形狀,添加傳感器屬性,從RSoft導(dǎo)入BSDF文件,添加光源(下圖中為太陽光源),并使用LightTools的光線路徑工具來運行蒙特卡洛仿真,以分析雜散光所有可能的路徑。仿真結(jié)果將類似于右側(cè)所示的圖像。

a115549e-747f-11ed-8abf-dac502259ad0.png

左側(cè)是LightTools攝像頭模型;右側(cè)是傳感器上看到的雜散光圖

3. 使用COM API將仿真成像結(jié)果與雜散光圖相結(jié)合 最后一步是使用COM API將來自CODE V的仿真成像結(jié)果與使用LightTools和RSoft計算得出的雜散光相結(jié)合。在這個卷積中可以調(diào)整亮度系數(shù)和能量比。

a14183e8-747f-11ed-8abf-dac502259ad0.png

結(jié)合來自CODE V的仿真圖像與來自LightTools的雜散光圖而得到的卷積圖像;右側(cè)是仿真成像結(jié)果

通過利用仿真圖像上的圖像質(zhì)量指標(biāo)來評估圖像,能夠進一步優(yōu)化系統(tǒng),從而達到適合目標(biāo)應(yīng)用的規(guī)格。通過CODE V、LightTools和RSoft光子器件工具對仿真圖像進行虛擬測試是一個強大的工作流程,不僅可以避免成像系統(tǒng)超規(guī)格,而且還可以通過仿真預(yù)測組裝和測試階段來節(jié)省時間。

??


原文標(biāo)題:當(dāng)鏡頭設(shè)計遇上數(shù)字孿生

文章出處:【微信公眾號:新思科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 新思科技
    +關(guān)注

    關(guān)注

    5

    文章

    802

    瀏覽量

    50376

原文標(biāo)題:當(dāng)鏡頭設(shè)計遇上數(shù)字孿生

文章出處:【微信號:Synopsys_CN,微信公眾號:新思科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    數(shù)字孿生系統(tǒng)

    傳統(tǒng)港口存在痛點,數(shù)字孿生系統(tǒng)通過在虛擬空間中建立與物理港口一一對應(yīng)的模型,并接入實時生產(chǎn)運營數(shù)據(jù),實現(xiàn)對碼頭的生產(chǎn)作業(yè)進行多角度、全方位的實時監(jiān)控,推動碼頭作業(yè)及管理工作的數(shù)字化轉(zhuǎn)型同時提高
    的頭像 發(fā)表于 01-10 10:05 ?66次閱讀
    <b class='flag-5'>數(shù)字</b><b class='flag-5'>孿生</b>系統(tǒng)

    數(shù)字孿生對工業(yè)4.0的影響

    在工業(yè)4.0的浪潮中,數(shù)字孿生技術(shù)正逐漸成為制造業(yè)轉(zhuǎn)型的關(guān)鍵驅(qū)動力。數(shù)字孿生,即創(chuàng)建一個物理實體的精確數(shù)字副本,這個概念在工業(yè)領(lǐng)域中的應(yīng)用,
    的頭像 發(fā)表于 10-25 14:46 ?472次閱讀

    數(shù)字孿生與物聯(lián)網(wǎng)的結(jié)合

    聯(lián)網(wǎng)則是通過傳感器、設(shè)備和網(wǎng)絡(luò)連接,實現(xiàn)物理世界與數(shù)字世界的無縫連接。當(dāng)這兩個技術(shù)結(jié)合時,它們可以為制造業(yè)、醫(yī)療、城市基礎(chǔ)設(shè)施和其他行業(yè)帶來革命性的變化。 數(shù)字孿生與物聯(lián)網(wǎng)的結(jié)合 1.
    的頭像 發(fā)表于 10-25 14:36 ?447次閱讀

    數(shù)字孿生在制造業(yè)的應(yīng)用

    在當(dāng)今快速發(fā)展的工業(yè)4.0時代,數(shù)字孿生技術(shù)正逐漸成為制造業(yè)的核心競爭力之一。數(shù)字孿生,即通過創(chuàng)建一個物理實體的精確虛擬副本,模擬其在現(xiàn)實世界中的行為和性能,從而實現(xiàn)對實體的監(jiān)控、預(yù)測
    的頭像 發(fā)表于 10-25 14:15 ?380次閱讀

    如何實現(xiàn)數(shù)字孿生?看這篇就夠了

    數(shù)字孿生(Digital Twin)是一種集成了物理世界和數(shù)字世界的先進概念,通過高精度的模擬來反映現(xiàn)實世界的實體或系統(tǒng)。它利用物聯(lián)網(wǎng)(IoT)、大數(shù)據(jù)、人工智能(AI)、云計算等先進技術(shù),實現(xiàn)
    的頭像 發(fā)表于 09-09 16:01 ?453次閱讀

    數(shù)字孿生:概述、應(yīng)用場景與意義

    數(shù)字孿生是一種先進的技術(shù)概念,它通過數(shù)字化建模和仿真技術(shù),在虛擬世界中實時反映和模擬物理實體、過程或系統(tǒng)的運行狀態(tài)。數(shù)字孿生技術(shù)將現(xiàn)實世界與
    的頭像 發(fā)表于 08-08 11:04 ?567次閱讀

    基于數(shù)字孿生的智慧城市

    智慧城市 是指利用信息和通信技術(shù)(ICT)來改善城市運行和管理的城市發(fā)展模式。數(shù)字孿生是一種數(shù)字化城市的概念,通過數(shù)字孿生技術(shù),城市可以在虛
    的頭像 發(fā)表于 07-16 11:34 ?448次閱讀

    數(shù)字孿生開發(fā)平臺的重要性

    數(shù)字孿生 開發(fā)平臺在當(dāng)今數(shù)字化轉(zhuǎn)型的背景下變得越來越重要。它是一種通過虛擬仿真技術(shù)模擬實際物理系統(tǒng)、產(chǎn)品或過程的數(shù)字化復(fù)制,有助于優(yōu)化設(shè)計、監(jiān)控運營以及預(yù)測性維護等方面。以下是
    的頭像 發(fā)表于 06-24 15:33 ?405次閱讀

    數(shù)字孿生場景構(gòu)建的未來發(fā)展

    數(shù)字孿生 (Digital Twin)是指通過將實體世界中的物理對象、過程或系統(tǒng)與其在數(shù)字世界中的虛擬模型相連接,從而實現(xiàn)實時監(jiān)測、分析和優(yōu)化的技術(shù)。數(shù)字
    的頭像 發(fā)表于 06-11 14:57 ?368次閱讀
    <b class='flag-5'>數(shù)字</b><b class='flag-5'>孿生</b>場景構(gòu)建的未來發(fā)展

    數(shù)字孿生技術(shù)應(yīng)用白皮書(2021)

    前言 隨著經(jīng)濟社會數(shù)字化轉(zhuǎn)型的持續(xù)推進,數(shù)字孿生逐漸成為產(chǎn)業(yè)各界關(guān)注的熱點技術(shù)。數(shù)字孿生起源航天軍工領(lǐng)域,近年來持續(xù)向智能制造、智慧城市等垂
    的頭像 發(fā)表于 06-05 15:46 ?590次閱讀
    <b class='flag-5'>數(shù)字</b><b class='flag-5'>孿生</b>技術(shù)應(yīng)用白皮書(2021)

    什么是數(shù)字孿生

    近年來,數(shù)字孿生這個詞不斷出現(xiàn)在公眾視野中,尤其是隨著物聯(lián)網(wǎng)技術(shù)的發(fā)展,數(shù)字孿生不斷出現(xiàn)在各行各業(yè)。乍一看,這個概念還是比較生僻的。什么是數(shù)字
    的頭像 發(fā)表于 06-05 15:45 ?979次閱讀

    數(shù)字孿生場景構(gòu)建的技術(shù)和優(yōu)勢

    隨著科技的進步,數(shù)字孿生面向智慧交通、園區(qū)、城市、建筑、應(yīng)急等領(lǐng)域的客戶,提供行業(yè)解決方案。數(shù)字孿生是以數(shù)字的方式為現(xiàn)實物體創(chuàng)建高度仿真的虛
    的頭像 發(fā)表于 05-22 16:48 ?344次閱讀
    <b class='flag-5'>數(shù)字</b><b class='flag-5'>孿生</b>場景構(gòu)建的技術(shù)和優(yōu)勢

    數(shù)字孿生當(dāng)數(shù)字科技遇上現(xiàn)實世界

    數(shù)字孿生是指通過數(shù)字化技術(shù),將物理世界的實體與虛擬數(shù)字模型相聯(lián)系,從而實現(xiàn)實時復(fù)制和仿真的技術(shù)。它的出現(xiàn),為我們打開了一扇通往未來的大門。數(shù)字
    的頭像 發(fā)表于 05-13 16:41 ?441次閱讀

    數(shù)字孿生關(guān)鍵技術(shù)及體系架構(gòu)

    摘要:? 數(shù)字孿生以各領(lǐng)域日益龐大的數(shù)據(jù)為基本要素,借助發(fā)展迅速的建模仿真、人工智能、虛擬現(xiàn)實等先進技術(shù),構(gòu)建物理實體在虛擬空間中的數(shù)字孿生體,實現(xiàn)對物理實體的
    的頭像 發(fā)表于 04-02 14:21 ?817次閱讀

    灌區(qū)數(shù)字孿生方案(數(shù)字孿生應(yīng)用案例)

    隨著數(shù)字化、智能化技術(shù)在各領(lǐng)域的廣泛應(yīng)用,數(shù)字孿生已成為當(dāng)今優(yōu)化管理、提升效率的重要手段之一。而對于農(nóng)業(yè)灌區(qū)這一復(fù)雜系統(tǒng)來說,應(yīng)用數(shù)字孿生
    的頭像 發(fā)表于 01-22 11:23 ?590次閱讀
    灌區(qū)<b class='flag-5'>數(shù)字</b><b class='flag-5'>孿生</b>方案(<b class='flag-5'>數(shù)字</b><b class='flag-5'>孿生</b>應(yīng)用案例)