0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

實際拍照測評:AI攝影大師是如何成就大片

454398 ? 來源:中關村在線 ? 作者:中關村在線 ? 2020-09-01 11:25 ? 次閱讀

越來越多的人選擇用通過照片與視頻的方式保留記憶,而在剛過去的五一假期,出門游玩中攜帶一部影像系統(tǒng)優(yōu)秀的手機就能展現(xiàn)出對于生活記錄的優(yōu)勢,而對于一部拍照優(yōu)秀的手機來說,除了鏡頭參數(shù)的耀眼外,也離不開手機SoC和AI提供的性能支持。

如果說起安卓手機陣營中,影像性能最好的SoC,旗艦機型標配的驍龍865自然當仁不讓,除內(nèi)置Spectra 480ISP外,還有Qualcomm第五代人工智能引擎AI Engine的加持。提起AI,很多人會下意識和營銷手段、噱頭聯(lián)系在一起,但從實際的移動端影像系統(tǒng)來看,通過SoC內(nèi)置的Spectra 480ISP+Qualcomm AI引擎的結(jié)合,給手機拍照有著強悍的表現(xiàn),下面我們結(jié)合搭載865 SoC手機的實際拍照表現(xiàn)來闡述第五代Qualcomm人工智能引擎AI Engine在實際拍照中的作用。

01AI引擎帶來是全方位畫質(zhì)升級

在移動端影像飛速發(fā)展的過程中,業(yè)內(nèi)也嘗試通過對于移動端鏡頭的升級全面帶動移動端影像的進步,但移動端影像系統(tǒng)的發(fā)展方向并不是復刻專業(yè)相機的“鏡頭路線”,而是借助移動端使用便捷的優(yōu)勢讓普羅大眾記錄生活。而手機作為當前用戶最智能的使用終端,通過AI引擎實現(xiàn)對于視覺能力的全方位提升才是更貼近用戶的發(fā)展方向。

可以說當前相機的影像系統(tǒng)和手機影像系統(tǒng)走上了兩種不同的方向。相機追求的是保留更多細節(jié)便于留出更多后期處理空間,移動端則是更快更便捷記錄與分享生活。在這一過程中,移動端通過AI引擎對于成像結(jié)果的自動調(diào)校就起到了很大的增益作用。以的影像系統(tǒng)為例,AI引擎對于這套影像系統(tǒng)的實際使用也有明顯的增益作用。

驍龍865的AI算力來源于第五代Qualcomm人工智能引擎AI Engine。第五代AI引擎則由 Kryo 585 CPU+Adreno 650 GPU+Hexagon 698張量構(gòu)成,每一部分都有各自的運算專長,系統(tǒng)會根據(jù)實際負載將需求分配到到CPU、GPU和張量處理器上。高通第五代AI Engine的AI算力達到了15TOPS,保證高性能與功耗低兼?zhèn)?,滿足移動端的使用需求。

規(guī)拍攝對于圖片表現(xiàn)力的增強

Pro常規(guī)樣張

常規(guī)場景下移動端拍攝過程經(jīng)歷“鏡頭與CMOS收集圖片信息”到“Spectra 480 ISP+AI引擎增強畫面表現(xiàn)力”再到“最終成像結(jié)果”的過程。在第二個步驟中,Spectra 480 ISP和AI引擎會根據(jù)實際的算法提升圖片的細節(jié)與質(zhì)感,達到增強像系統(tǒng)表現(xiàn)力的目的。

AI場景識別是提升拍攝表現(xiàn)力的關鍵

AI引擎提升最終拍攝表現(xiàn)力的原因主要是AI基于深度學習功能對移動端進行最終畫質(zhì)的針對性優(yōu)化,保證拍攝的最終觀感。當你使用移動端影像拍攝時,驍龍865內(nèi)置的第五代AI引擎則會識別你當前拍攝場景是人、食物、風景還是是動物。

AI場景識別

AI優(yōu)化拍攝過程中最重要的是AI引擎對于場景的識別。采用驍龍865的手機會默認打開這個功能,第五代AI引擎會幫助用戶自動識別當前場景并選擇最佳的拍攝參數(shù),并會根據(jù)實際場景選擇“夜景模式”、“微距模式”等。同時,AI引擎還會對拍攝選擇合適的曝光和色彩調(diào)節(jié),讓用戶從繁瑣的拍攝參數(shù)中解放,享受所見即所得的拍攝樂趣。

弱光環(huán)境下提升拍攝降噪的處理

OPPO Pro弱光拍攝

弱光對于移動端的拍攝要求相對較高。這是因為手機CMOS受元器件體積的限制,弱光下的表現(xiàn)往往不盡人意。移動端解決弱光拍攝的手段是通過短時間內(nèi)拍攝多張不同曝光下的照片,通過挑選與合成的方式實現(xiàn)對于移動端弱光拍攝增強的效果。這個過程中除了對于鏡頭與CMOS參數(shù)的硬件要求外,也對于ISP和AI Engine的計算性能提出了要求。

搭載驍龍865 SoC的OPPO Find X2 Pro 上的“超級夜景 3.0”技術,一方面通過Spectra 480 ISP以每秒處理20億像素的速度處理圖片信息,另一方面利用AI引擎則通過場景識別等功能實現(xiàn)對于圖片的噪點去除、壞點修補、曝光校正等功能,進而呈現(xiàn)優(yōu)質(zhì)的弱光拍攝效果。正式在ISP和AI Engine的聯(lián)合作用下,實現(xiàn)了對于實際的夜景環(huán)境進行圖像重建和色彩重建。

對于高清視頻支持

視頻是當前最重要的分享媒介之一,移動端的影像系統(tǒng)也讓普通人能夠通過極低的成本完成對于視頻的錄制與處理。用戶對于視頻的需求無非兩點——“看得清”(更高的畫質(zhì))和“拍得穩(wěn)”(更好的防抖控制)。采用驍龍865 SoC的手機實現(xiàn)對于 4K 視頻的錄制,而驍龍865借力Spectra 480ISP與第五代AI引擎最高實現(xiàn)了對于8K視頻的錄制。

在Spectra 480 ISP和高通第五代AI Engine的算力支持下,移動端影像系統(tǒng)最終成像表現(xiàn)有了長足的進步。AI引擎在不同的環(huán)境下帶來了不同的畫面表現(xiàn)力,使移動端影像系統(tǒng)擺脫了傳統(tǒng)拼鏡頭與參數(shù)的桎梏,帶來了更多的拍攝趣味、更豐富的畫面色彩表現(xiàn)、更優(yōu)秀的成像效果。

02除了對影像效果升級外,AI提升了相機的智能程度

上文我們闡述了高通驍龍第五代AI引擎在手機影像系統(tǒng)中的具體作用。從AI引擎在影像系統(tǒng)中的處理我們不難發(fā)現(xiàn)“不搭載AI引擎的傳統(tǒng)智能手機”與搭載“搭載AI引擎的智能手機”的區(qū)別:

傳統(tǒng)智能手機只能一對一解決問題,用戶如果要得到一張精致的照片,首先需要用相機拍出一張照片,然后通過App對圖片進行后期處理;而搭載AI引擎的智能手機則可以在用戶拍攝后就可以得到精致的照片,無需任何處理。

這個過程中,AI引擎根據(jù)用戶的實際需求簡化了拍照的流程。AI引擎對于移動端最重要的提升是實現(xiàn)移動設備對于人需求的理解:通過提升移動設備的感知能力,讓移動設備了解消費者的需求才是移動端的未來,而高通AI引擎深入?yún)⑴c移動端影像系統(tǒng),進而讓移動端影像系統(tǒng)變得更好用。

AI引擎帶來平滑順暢的變焦過程

移動端的影像系統(tǒng)受制于體積無法搭載體積龐大的光學變焦鏡頭,因而移動端的變焦是通過后置多攝的鏡頭接力與算法補足實現(xiàn)的。目前移動端主流的變焦是通過在廣角、主攝與長焦鏡頭中切換來實現(xiàn)的。但因為多個攝像頭的位置不一樣,所以在變焦過程中會出現(xiàn)變焦過程不夠順暢的問題。


采用驍龍865手機的變焦效果

而采用驍龍865的手機則能夠?qū)崿F(xiàn)平滑的光學變焦和保持變焦過程中畫面曝光與色彩的一致, 可以說Spectra 480 ISP和高通AI引擎正是移動端實現(xiàn)平滑變焦幕后功臣。移動端影像系統(tǒng)不借助AI引擎強大的算力能夠保證用戶在不同鏡頭的切換過程中保持拍攝畫面取景框的穩(wěn)定,從而使移動端變焦過程呈現(xiàn)更平滑流暢的使用效果。

同時,移動端影像系統(tǒng)變焦面臨的另外一個問題是拍攝最終樣張的實際曝光與色彩呈現(xiàn)不一致的現(xiàn)象,這是移動端影像系統(tǒng)常見的問題。而高通第五代 AI 引擎以運算的形式修正拍攝畫面的參數(shù),實時優(yōu)化變焦畫面,最終將變焦拍攝得到的圖片風格、色彩與曝光控制在同一風格。

眾多手機廠商在高通第五代AI Engine基礎上開發(fā)屬于自己的變焦技術。其中realme在高通第五代AI Engine的基礎上研發(fā)出SAT平滑變焦技術,可以模擬出單反鏡頭變焦的感覺,多個鏡頭切換畫面穩(wěn)定不跳躍,而且可以保持曝光、色溫等效果的一致。

AI引擎實現(xiàn)對于4單元色彩濾鏡陣列硬件加速

高通憑借這種理解在AI引擎中實現(xiàn)了對于4單元色彩濾鏡陣列硬件加速的支持?,F(xiàn)在很多的移動端傳感器是像素四合一,像素四合一的優(yōu)勢是提升實際拍攝效果,但過去在處理像素四合一的運算是1個像素1個像素進行的,而AI引擎的硬件加速則實現(xiàn)對一次運行處理4個像素,通過CPU、DSP與ISP的接入處理,降低功耗的同時提升運行效率。

4單元色彩濾鏡陣列硬件加速

AI引擎帶來更聰明的對焦

移動端影像的躍進帶來的是用戶對于移動端影像系統(tǒng)的對焦有著更高的要求。在AI引擎全面應用移動端之前,移動端已經(jīng)出現(xiàn)了提升對焦效率的算法,但AI引擎加持下的手機對焦則有了聰敏的大腦,移動端對焦效率得到大幅度提升,經(jīng)過AI場景識別的取景框會自動識別畫面焦點并實時追焦,實現(xiàn)真正意義上的“自動對焦”。

NEX3s“人眼追焦”功能需要AI Engine支持

此外,有些傳感器搭載的“全對焦區(qū)域自動”功能則需要同分調(diào)用Spectra 480 ISP和第五代AI Engine性能,帶來更準確的對焦效果;還有vivo NEX3s借助AI Engine的算力實現(xiàn)了對于“人眼追焦”功能的實現(xiàn),進而實現(xiàn)了更好的人像拍攝效果。

上述這些讓人驚艷的拍攝功能,如果離了AI引擎,會出現(xiàn)不能實現(xiàn)或者表現(xiàn)效果大打折扣的問題。而AI引擎對于影像系統(tǒng)的影響還體現(xiàn)在拍攝過程的電量消耗上:不僅可以將攝像頭的功耗控制在1毫瓦以內(nèi),還可以將視頻拍攝的功耗降低16%。而ISP+AI引擎在通過全方位的優(yōu)化提升移動端影像系統(tǒng)的使用體驗,重新定位移動端影像操作的前進方向。

03AI引擎還提升了移動端后期處理

如果手機不具備AI算力或者AI算力不足,我們可以借助第三方App對圖片進行AI處理,具體步驟為:“圖片傳輸?shù)皆贫恕薄敖柚掌鰽I算力對圖片進行處理”→“從云端回本地”。在這個過程中不僅需要流量,還對于網(wǎng)絡也有一定的要求,當移動端的AI算力足夠強,我們可以在手機端實現(xiàn)對于圖片的AI美化。

實時路人消除

在拍攝過程中,很難避免路人搶鏡,而搭載高通865的概念機借助第五代AI引擎實現(xiàn)了實時路人消除功能。

實時路人消除

這種功能依靠移動端高通第五代AI引擎的強大算力實現(xiàn)了對于圖片與視頻的復原,消除視頻與圖片中的“路人甲”,進而保證移動端的拍攝主體不被搶鏡。保證視頻與圖片的純凈度,突出主體。

AI一鍵換天

“AI一鍵換天”則是移動端AI技術大熱的功能,這項技術借助高通第五代AI引擎的每秒15萬億次運算,在極短的時間內(nèi)實現(xiàn)圖像分割,優(yōu)化圖片背景,成為移動端的AI修圖神器。

AI一鍵換天

上圖中不難看出,“AI一鍵換天”可以瞬間將圖片中的背景更改為彩色或者換成完全不一樣的天空。特別是當我們在某處拍攝后,可將不滿意的天空背景換成其他顏色,而手機廠商搭載的“AI一鍵換天”則就是基于高通第五代AI引擎實現(xiàn)的。先通過高通第五代AI引擎實現(xiàn)對于圖像的分割,繼而根據(jù)用戶需求變換天空色彩與背景,呈現(xiàn)效果如魔法般神奇。

除了上述AI引擎在移動端后期的功能,還有AI智能構(gòu)圖、AI聲音對焦等貫穿于移動端影像系統(tǒng)的功能。AI引擎在移動端的作用已經(jīng)打通了影像信息采集、影像處理、成像與后期處理等全過程。而高通第五代AI引擎的強大算力是為了更好地滿足用戶對于Vlog、旅游記錄、保留更清晰的記憶等越來越多、越來越嚴苛的需求。

04總結(jié)

AI引擎給手機帶來的優(yōu)勢是讓手機越來越智能,越來越好用,越來越理解用戶的心意,而移動端影像系統(tǒng)則是AI引擎最能體現(xiàn)價值與發(fā)揮作用的場景,在AI引擎的加持下,用戶只需要按照AI引擎的指引實現(xiàn)構(gòu)圖與按下快門就行了。繁瑣的技術細節(jié)于傳統(tǒng)的拍攝技巧都可以放諸腦后。

把用來調(diào)節(jié)參數(shù)、考慮技巧與后期處理的時間解放出來,交給高通第五代AI引擎去處理,這是移動端影像系統(tǒng)發(fā)展的必然趨勢,也是移動端在不同環(huán)境下呈現(xiàn)最優(yōu)質(zhì)影像效果的核心。每一段影像都是美好回憶,每一段影像都需要被銘記,而高通第五代AI引擎身居幕后統(tǒng)御移動端影像,時刻候命記錄用戶每一段記憶。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    30887

    瀏覽量

    269063
  • Qualcomm
    +關注

    關注

    8

    文章

    673

    瀏覽量

    52112
  • 驍龍865
    +關注

    關注

    0

    文章

    174

    瀏覽量

    12474
收藏 人收藏

    評論

    相關推薦

    AI智能芯片火熱,全芯片產(chǎn)業(yè)鏈都積極奔著人工智能去

    的推出,已經(jīng)為手機端AI芯片2019年的競爭格局定下了基調(diào)。AI芯片在智能手機中的應用,已經(jīng)從在拍照中的物體識別、場景識別(如華為P20 Pro中AI
    發(fā)表于 10-10 18:03

    使用AI Camera HarmonyOS開發(fā)板進行拍照和錄像

    一、前言本文主要介紹如何使用鴻蒙官方camera示例代碼,在AI Camera開發(fā)板(Hi3516DV300)上進行拍照和錄像演示,目的為理解鴻蒙操作系統(tǒng)應用框架,熟悉鴻蒙開發(fā)板上應用調(diào)試流程,使得
    發(fā)表于 04-01 20:13

    變音大師科大訊飛vivivoice測評

    假可亂真的變音大師科大訊飛vivivoice軟件測評。
    發(fā)表于 08-17 17:50 ?5561次閱讀

    手機攝影必修課,不可錯過的大片速成技巧

    要說最近攝影效果好的雙攝手機,華為P10絕對會是大多數(shù)人的第一反應。雖然說強大的硬件加軟件實力,讓華為P10能夠隨手拍出大片,但如果你再掌握一些必須的技巧,那絕對是錦上添花,能讓拍照效果得到更大
    發(fā)表于 10-13 12:09 ?601次閱讀

    成為攝影達人必不可少的工具

    攝影達人的好助手Adaptalux Studio攝影燈 雖然手機拍照已經(jīng)是全民習慣,喜歡攝影的朋友不在少數(shù),還有些開網(wǎng)店的朋友也需要用較為專業(yè)的相機拍拍東西。 想要拍出雜志
    的頭像 發(fā)表于 04-03 16:00 ?4093次閱讀

    攝影小白拍出大片的 OPPO R15 了解一下

    但問題來了,拍照技術不好能拍出夏日清新大片嗎?答案是肯定的,最近 OPPO R15 就憑借出色的外觀及過硬的拍照性能俘虜了不少人心,并且憑借 AI 人工智能的加持讓
    的頭像 發(fā)表于 04-25 16:30 ?4885次閱讀

    徠卡三攝+AI智慧攝影 拍出大師大片信手拈來

    隨著五一小長假的到來,很多朋友們正籌劃著結(jié)伴出游,出游踏青免不了要拍照留念,對于普通攝影愛好者來說,單反過于沉重專業(yè),不學個一年半載完全無法上手,微單呢,雖然拍照效果過得去,但是沒有辦法在第一時間把
    發(fā)表于 04-26 16:48 ?1135次閱讀

    不懂攝影知識,不會構(gòu)圖,拍不出好照片?試試華為P20系列AI智慧攝影

    P20系列手機,自帶了AI攝影大師功能,AI智慧攝影能夠進行場景識別,自動選擇拍照模式,更能提供
    發(fā)表于 04-28 17:54 ?1498次閱讀

    驍龍845有哪些大師攝影功能 驍龍845攝影怎樣

    一部搭載Qualcomm驍龍845移動平臺的手機可以助你一臂之力,離朋友圈攝影大師近了不止一步。
    的頭像 發(fā)表于 07-16 10:11 ?3331次閱讀

    手機AI芯片進入一個全新時代!AI芯片氣勢如虹智能手機成最大受益者

    AI芯片在智能手機中的應用,已經(jīng)從在拍照中的物體識別、場景識別(如華為P20 Pro中AI攝影大師),發(fā)展到針對視頻中人體姿態(tài)、動作進行實時
    的頭像 發(fā)表于 10-16 15:24 ?5914次閱讀
    手機<b class='flag-5'>AI</b>芯片進入一個全新時代!<b class='flag-5'>AI</b>芯片氣勢如虹智能手機成最大受益者

    國美U9手機拍照怎么樣

    朋友圈里的圖片為什么都拍得那么好看,一盤西紅柿炒雞蛋,都能讓人感覺是5星級酒店的豪華大餐。辦公室里不起眼的盆栽,桌子上的一個小擺件,都拍得那么的漂亮。這樣的攝影技術,要怎么才能學到呢?沒關系,你只需有一臺擁有AI拍照
    的頭像 發(fā)表于 01-11 10:44 ?2262次閱讀

    榮耀10AI相機功能解讀

    榮耀10評測:從開始,“AI拍照”就開始成為榮耀拍照重要的技能,通過AI拍照功能,即使是攝影小白
    的頭像 發(fā)表于 01-07 11:46 ?5741次閱讀

    大師電動車智能化測評報告—第十四期

    大師第十四期智能化電動車測評排行榜數(shù)據(jù)來源于魯大師智慧實驗室,測評的車型均為市面上主流品牌的主流車型。截止目前,魯大師智能化電動車
    的頭像 發(fā)表于 05-10 16:17 ?2470次閱讀
    魯<b class='flag-5'>大師</b>電動車智能化<b class='flag-5'>測評</b>報告—第十四期

    虹軟 PhotoStudio AI 智能商拍攝影軟件大師完成首輪定向用戶內(nèi)測

    虹軟備受矚目的創(chuàng)新力作 — PhotoStudio AI 智能商拍攝影軟件大師已完成首輪定向用戶內(nèi)測,此輪測試由傳統(tǒng)電商、跨境電商、品牌電商,以及商拍工作室等商拍外包服務商等群體組成,以需求方角度從
    的頭像 發(fā)表于 09-25 09:10 ?1205次閱讀

    虹軟PhotoStudio? AI 智能商拍攝影軟件大師完成首輪商業(yè)內(nèi)測

    最新消息,“視覺AI第一股”虹軟科技備受矚目的創(chuàng)新力作 — PhotoStudio? AI 智能商拍攝影軟件大師已完成首輪定向用戶內(nèi)測,此輪測試由傳統(tǒng)電商、跨境電商、品牌電商,以及商拍
    的頭像 發(fā)表于 09-25 11:10 ?485次閱讀