0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
电子发烧友
开通电子发烧友VIP会员 尊享10大特权
海量资料免费下载
精品直播免费看
优质内容免费畅学
课程9折专享价
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

借助攝影測量方法以及GPU賦力的深度學(xué)習(xí)

NVIDIA英偉達(dá)企業(yè)解決方案 ? 來源:lq ? 2018-12-05 13:35 ? 次閱讀

借助攝影測量方法以及GPU賦力的深度學(xué)習(xí),以虛擬形式探訪陵墓的細(xì)節(jié)。

現(xiàn)在,游客無需越洋飛行就能探索納菲爾塔莉墓的精致細(xì)節(jié)。

納菲爾塔莉墓被譽(yù)為埃及最好的墓穴之一。主人納菲爾塔莉被認(rèn)為是拉美西斯二世五位妻子中最美麗的一位。拉美西斯二世為其建造的陵墓是紀(jì)念其美貌的圣地,陵墓中三間墓室和走廊墻壁都用彩飾進(jìn)行裝飾。

納菲爾塔莉墓與王后谷中的大多數(shù)陵墓一樣,在考古學(xué)家發(fā)現(xiàn)之前也曾遭到過盜墓。雖然已采取相應(yīng)的保護(hù)措施,但景點(diǎn)仍然非常脆弱。

Simon Che de Boer及其位于新西蘭的視覺特效研發(fā)公司realityvirtual.co找到了一種數(shù)字方式來保護(hù)納菲爾塔莉墓,為無數(shù)人參觀墓中景象提供了機(jī)會(huì)。

納菲爾塔莉:永恒之旅(Nefertari: A Journey to Eternity)提供VR體驗(yàn),通過高端攝影測量、視覺效果技術(shù)和AI,打造令人震撼的細(xì)節(jié)體驗(yàn),使納菲爾塔莉墓重現(xiàn)昔日輝煌。游客可以采用數(shù)字方式四處行走,從不同視角進(jìn)行參觀,還可以進(jìn)行放大以近距離觀察

對(duì)于需要跨越半個(gè)地球才能目睹這一景觀的游客來說,這是一個(gè)效果逼真的替代選擇。

使用NVIDIA Quadro GPU處理海量數(shù)據(jù)

為了復(fù)制陵墓精致的細(xì)節(jié),Che de Boer拍攝了近4000張4200萬像素的景點(diǎn)照片,然后將攝影測量(在照片中進(jìn)行測量的科學(xué))與深度學(xué)習(xí)方法結(jié)合,對(duì)其進(jìn)行處理和可視化。

NVIDIA GPU在處理現(xiàn)場采集的大量攝影測量數(shù)據(jù)上發(fā)揮了關(guān)鍵作用,其處理速度比CPU快很多倍。

GPU也是進(jìn)行3D重建和呈現(xiàn)細(xì)節(jié)紋理不可或缺的部分。通過借助部署高端NVIDIA Quadro GPU的強(qiáng)大HP工作站,realityvirtual.co使用CapturingReality將數(shù)據(jù)轉(zhuǎn)換為密集的240億3D點(diǎn)云,以進(jìn)行初始創(chuàng)建。

初始清理工作則使用Autodesk MeshMixer和Maya完成。然后,他們使用內(nèi)部專用流程完成改良工作并提高效率,包括填充孔、推斷材料特性、去除噪點(diǎn)和清理人工痕跡。

Che de Boer 在陵墓內(nèi)部拍攝圖像

接下來,他們對(duì)這些龐大的數(shù)據(jù)集進(jìn)行優(yōu)化,以便在Unreal Engine中以每秒90幀的穩(wěn)定速度進(jìn)行實(shí)時(shí)渲染,利用Granite的紋理流保留全部240億個(gè)細(xì)節(jié)點(diǎn)。

Che de Boer說:“由于數(shù)據(jù)集非常龐大,處理和播放速度是關(guān)鍵。NVIDIA的新架構(gòu)與Unreal Engine相結(jié)合,加快了處理速度,并為處理龐大的數(shù)據(jù)量提供支持?!?/p>

AI助力創(chuàng)建更為逼真的VR

如果不去除陵墓中的現(xiàn)代人工痕跡,就不可能參觀到“真正”的古墓。為了實(shí)現(xiàn)這一目標(biāo),realityvirtual.co收集了陵墓的所有壓縮數(shù)據(jù),并且使用可編程Tensor Core和單個(gè)高端NVIDIA Quadro GPU提供的24Gb VRAM容量訓(xùn)練其超級(jí)采樣集。

通過訓(xùn)練計(jì)算機(jī)使其理解所看到的事物,計(jì)算機(jī)可以修改圖像以清除現(xiàn)代人工痕跡。例如,通過圖像修復(fù)方法去除出口標(biāo)志、牌匾、扶手、地板和鹵素?zé)?,并使用與周邊環(huán)境相關(guān)的元素取代這些區(qū)域。

為了覆蓋圖像中的缺口、清除不需要的元素或修復(fù)源攝影測量圖像中的重疊區(qū)域,realityvirtual.co利用一種新的基于AI的圖像修復(fù)方法(此方法由NVIDIA Research開發(fā),并且即將通過NVIDIA NGX技術(shù)堆棧提供給軟件開發(fā)者),使用周邊環(huán)境的元素填充這些區(qū)域。

Che de Boer說:“如果沒有高端NVIDIA Quadro提供的內(nèi)存,處理4200萬像素圖像的數(shù)據(jù)是不可能的。我們?cè)跀z影測量和AI處理過程中廣泛使用了NVIDIA CUDA cuDNN,且貫穿到我們創(chuàng)作的各個(gè)環(huán)節(jié),以實(shí)現(xiàn)最為逼真的效果。這看起來非常震撼,您可以獲得一種身臨其境的感覺,如果我們將NVIDIA RTX實(shí)時(shí)光線追蹤整合到未來的版本中,這種體驗(yàn)只會(huì)變得更好?!?/p>

更新的內(nèi)部版本已通過realityvirtual.co的超級(jí)采樣法運(yùn)行。這是在他們自己的數(shù)據(jù)集上進(jìn)行超級(jí)采樣訓(xùn)練,進(jìn)一步提高了最終紋理映射的細(xì)節(jié)水平。

無論參觀者距離陵墓的現(xiàn)代人工痕跡有多近,都無法分辨得出它們。除此之外,最近越來越多的項(xiàng)目開始使用realityvirtual.co的deepPBR方法,以消除圖像擴(kuò)散、粗糙和位移。這對(duì)使用基于物理渲染的引擎(例如Unreal Engine)而言非常重要。

所有這些數(shù)據(jù)都是自行進(jìn)行訓(xùn)練的,這是一個(gè)AI使用自身數(shù)據(jù)進(jìn)行自我改進(jìn)的好例子。此結(jié)果可用作教學(xué)模擬,并可在STEAM游戲平臺(tái)免費(fèi)獲得,但是需要Vive、Rift或Windows VR頭盔。

為了繼續(xù)記錄遺產(chǎn)并在未來對(duì)其進(jìn)行數(shù)字保護(hù),最近Che de Boer與來自洛桑聯(lián)邦理工學(xué)院(EPFL,瑞士洛桑的一所著名的研究大學(xué))的Sarah Kenderdine教授達(dá)成了戰(zhàn)略合作關(guān)系。他們希望通過合作以虛擬形式重建新西蘭的克賴斯特徹奇大教堂,重現(xiàn)它2011年遭到地震破壞之前的樣子。此外,他們也在其他一些尚未公布但非常著名的自然景觀上進(jìn)行合作。

Che de Boer 表示:“這些都是知之者眾而見之者寡的地方,我們的目標(biāo)是讓全世界的人都能參觀這些景點(diǎn),否則他們可能在有生之年都沒有機(jī)會(huì)感受這些景點(diǎn)?!?/p>

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4798

    瀏覽量

    129516
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31892

    瀏覽量

    270708
  • 深度學(xué)習(xí)
    +關(guān)注

    關(guān)注

    73

    文章

    5521

    瀏覽量

    121672

原文標(biāo)題:借助超現(xiàn)實(shí)VR探索埃及納菲爾塔莉墓

文章出處:【微信號(hào):NVIDIA-Enterprise,微信公眾號(hào):NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 0人收藏

    評(píng)論

    相關(guān)推薦

    GPU深度學(xué)習(xí)中的應(yīng)用 GPUs在圖形設(shè)計(jì)中的作用

    隨著人工智能技術(shù)的飛速發(fā)展,深度學(xué)習(xí)作為其核心部分,已經(jīng)成為推動(dòng)技術(shù)進(jìn)步的重要力量。GPU(圖形處理單元)在深度學(xué)習(xí)中扮演著至關(guān)重要的角色,
    的頭像 發(fā)表于 11-19 10:55 ?808次閱讀

    Pytorch深度學(xué)習(xí)訓(xùn)練的方法

    掌握這 17 種方法,用最省力的方式,加速你的 Pytorch 深度學(xué)習(xí)訓(xùn)練。
    的頭像 發(fā)表于 10-28 14:05 ?304次閱讀
    Pytorch<b class='flag-5'>深度</b><b class='flag-5'>學(xué)習(xí)</b>訓(xùn)練的<b class='flag-5'>方法</b>

    GPU深度學(xué)習(xí)應(yīng)用案例

    GPU深度學(xué)習(xí)中的應(yīng)用廣泛且重要,以下是一些GPU深度學(xué)習(xí)應(yīng)用案例: 一、圖像識(shí)別 圖像識(shí)別是
    的頭像 發(fā)表于 10-27 11:13 ?550次閱讀

    深度學(xué)習(xí)GPU加速效果如何

    圖形處理器(GPU)憑借其強(qiáng)大的并行計(jì)算能力,成為加速深度學(xué)習(xí)任務(wù)的理想選擇。
    的頭像 發(fā)表于 10-17 10:07 ?286次閱讀

    GPU租用平臺(tái)怎么樣

    GPU租用平臺(tái)以其成本效益、靈活性與可擴(kuò)展性、簡化運(yùn)維以及即時(shí)訪問等優(yōu)勢,在深度學(xué)習(xí)、科學(xué)計(jì)算、圖形渲染等多個(gè)領(lǐng)域發(fā)揮著重要作用。
    的頭像 發(fā)表于 10-17 10:03 ?296次閱讀

    可控硅整流器的測量方法

    可控硅整流器的測量方法多種多樣,主要包括直流電壓測量、電流測量、觸發(fā)脈沖測量以及電阻測量等。每種
    的頭像 發(fā)表于 10-07 16:38 ?949次閱讀

    實(shí)時(shí)控制應(yīng)用中的 RTD 替代測量方法

    電子發(fā)燒友網(wǎng)站提供《實(shí)時(shí)控制應(yīng)用中的 RTD 替代測量方法.pdf》資料免費(fèi)下載
    發(fā)表于 09-12 09:10 ?0次下載
    實(shí)時(shí)控制應(yīng)用中的 RTD 替代<b class='flag-5'>測量方法</b>

    數(shù)字示波器的測量方法有哪三種

    數(shù)字示波器是一種廣泛應(yīng)用于電子測量領(lǐng)域的儀器,它能夠?qū)崟r(shí)顯示電壓波形,幫助工程師和技術(shù)人員對(duì)電子信號(hào)進(jìn)行分析和測量。數(shù)字示波器的測量方法有很多種,不同的測量方法適用于不同的應(yīng)用場景。以
    的頭像 發(fā)表于 07-17 18:02 ?2072次閱讀

    基于Python的深度學(xué)習(xí)人臉識(shí)別方法

    基于Python的深度學(xué)習(xí)人臉識(shí)別方法是一個(gè)涉及多個(gè)技術(shù)領(lǐng)域的復(fù)雜話題,包括計(jì)算機(jī)視覺、深度學(xué)習(xí)以及
    的頭像 發(fā)表于 07-14 11:52 ?1336次閱讀

    深度學(xué)習(xí)中的時(shí)間序列分類方法

    的發(fā)展,基于深度學(xué)習(xí)的TSC方法逐漸展現(xiàn)出其強(qiáng)大的自動(dòng)特征提取和分類能力。本文將從多個(gè)角度對(duì)深度學(xué)習(xí)在時(shí)間序列分類中的應(yīng)用進(jìn)行綜述,探討常用
    的頭像 發(fā)表于 07-09 15:54 ?1236次閱讀

    深度學(xué)習(xí)中的無監(jiān)督學(xué)習(xí)方法綜述

    應(yīng)用中往往難以實(shí)現(xiàn)。因此,無監(jiān)督學(xué)習(xí)深度學(xué)習(xí)中扮演著越來越重要的角色。本文旨在綜述深度學(xué)習(xí)中的無監(jiān)督學(xué)
    的頭像 發(fā)表于 07-09 10:50 ?1014次閱讀

    新手小白怎么學(xué)GPU云服務(wù)器跑深度學(xué)習(xí)?

    新手小白想用GPU云服務(wù)器跑深度學(xué)習(xí)應(yīng)該怎么做? 用個(gè)人主機(jī)通常pytorch可以跑但是LexNet,AlexNet可能就直接就跑不動(dòng),如何實(shí)現(xiàn)更經(jīng)濟(jì)便捷的實(shí)現(xiàn)GPU云服務(wù)器
    發(fā)表于 06-11 17:09

    噪聲的測量方法

    有效的方法,本期介紹噪聲的測量方法。常見觀測噪聲的設(shè)備為示波器,而示波器在正確操作使用下測量精度為3%,且本身存在底噪。搭配不同的探頭使用,觀測到的噪聲波形與數(shù)值截然不同
    的頭像 發(fā)表于 04-12 08:13 ?1432次閱讀
    噪聲的<b class='flag-5'>測量方法</b>

    噪聲的測量方法

    有效的方法,本期介紹噪聲的測量方法。 常見觀測噪聲的設(shè)備為示波器,而示波器在正確操作使用下測量精度為3%,且本身存在底噪。搭配不同的探頭使用,觀測到的噪聲波形與數(shù)值截然不同,使用X10探頭觀測信號(hào),會(huì)將示波器前端噪聲X
    的頭像 發(fā)表于 04-10 15:16 ?1330次閱讀
    噪聲的<b class='flag-5'>測量方法</b>

    FPGA在深度學(xué)習(xí)應(yīng)用中或?qū)⑷〈?b class='flag-5'>GPU

    現(xiàn)場可編程門陣列 (FPGA) 解決了 GPU 在運(yùn)行深度學(xué)習(xí)模型時(shí)面臨的許多問題 在過去的十年里,人工智能的再一次興起使顯卡行業(yè)受益匪淺。英偉達(dá) (Nvidia) 和 AMD 等公司的股價(jià)也大幅
    發(fā)表于 03-21 15:19

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會(huì)員交流學(xué)習(xí)
    • 獲取您個(gè)性化的科技前沿技術(shù)信息
    • 參加活動(dòng)獲取豐厚的禮品