為了能夠讓用戶充分體驗(yàn)到2億像素的驚艷細(xì)節(jié),vivo在開(kāi)發(fā)過(guò)程當(dāng)中結(jié)合了處理器,顯示屏這些零部件,能發(fā)揮出什么樣的增益效果呢?
因?yàn)橛跋袷且粋€(gè)軟硬結(jié)合的一個(gè)巨大的復(fù)雜系統(tǒng)。它從光學(xué)鏡頭到Sensor傳感器到模組到ISP(Image Signal Processing,圖像信號(hào)處理)到算法。它是5條核心的基礎(chǔ)線,其實(shí)是一個(gè)完整的有機(jī)的整體。這里面任何一個(gè)鏈條出現(xiàn)問(wèn)題,最終用戶就會(huì)感覺(jué)到特別難受。所以在這條線上,Sensor(圖像傳感器)是里面的一個(gè)很核心的關(guān)鍵。同時(shí)另外幾條線也很重要。
所以我們給ISOCELL HP9的Sensor(圖像傳感器)新開(kāi)了一個(gè)跟Sensor的CRA(Chief Ray Angle, 主光角)高度匹配的鏡頭。CRA的精度是什么?就是鏡頭的光的入射角度和Sensor的入射角度是高度匹配的,這個(gè)時(shí)候光進(jìn)來(lái)的損失是最少的。再一個(gè)就是NICE算法,AI大模型對(duì)Sensor的適配。訓(xùn)練模型花費(fèi)的時(shí)間周期是比較長(zhǎng)的。
再一個(gè)就是剛才提到的我們對(duì)處理器的優(yōu)化,對(duì)整個(gè)影像通路的優(yōu)化,包括它的傳輸速度,它的響應(yīng)時(shí)間,它的內(nèi)存占用,它的功耗,它全流程的端到端的全鏈路的優(yōu)化都是比較高的。
我們認(rèn)為我們跟三星在Sensor(圖像傳感器)這條線,長(zhǎng)焦第二主攝去做一個(gè)聯(lián)合的定義,給用戶呈現(xiàn)一個(gè)很好的效果。我們其實(shí)也有兩個(gè)初步的想法。第一個(gè)就是通過(guò)這次的X100 Ultra,我們要給用戶提供前所未有的中長(zhǎng)焦的變焦體驗(yàn)。第二個(gè)是希望給手機(jī)行業(yè)這個(gè)長(zhǎng)焦賽道,找到一個(gè)結(jié)合堆疊,效果,體驗(yàn),更具科學(xué)的一個(gè)方案,我們也在探索一個(gè)這樣的方案。更科學(xué)的就是大底潛望長(zhǎng)焦的這個(gè)方向。我也相信未來(lái)很多同行會(huì)慢慢的跟進(jìn)這個(gè)方向。這樣可以讓更多的消費(fèi)者獲得更好的中長(zhǎng)焦的變焦體驗(yàn)。
在提升長(zhǎng)焦相機(jī)畫(huà)質(zhì)的開(kāi)發(fā)過(guò)程中,vivo開(kāi)發(fā)團(tuán)隊(duì)都遇到了什么樣的困難? 是如何解決的呢?
我們內(nèi)部應(yīng)該是從22年底23年初開(kāi)始預(yù)研這個(gè)方案。這個(gè)過(guò)程中,有3到4個(gè)方向是遇到比較大的挑戰(zhàn)的。第一個(gè)就是小Pixel(像素)帶來(lái)的光學(xué)衍射問(wèn)題,因?yàn)樽钚〉腜ixel是0.56微米(?)。這個(gè)時(shí)候其實(shí)對(duì)光學(xué)的設(shè)計(jì),尤其是現(xiàn)在的大模型算法的要求都特別高。我們內(nèi)部用NICE引擎算法,和三星在Sensor(圖像傳感器)到算法之間的適配層面,做了大量的模型仿真工作?,F(xiàn)在的結(jié)果是非常不錯(cuò)的,我們欣喜的看到這個(gè)問(wèn)題已經(jīng)解決的比較好了。
第二條線其實(shí)就是這個(gè)模組特別大,特別重。這個(gè)對(duì)算法控制和這個(gè)機(jī)電一體的技術(shù)要求是比較高的。在這個(gè)層面我們跟三星的Sensor(圖像傳感器),三星電機(jī),vivo的算法團(tuán)隊(duì)與vivo內(nèi)部器件團(tuán)隊(duì)從2月份就開(kāi)始聯(lián)合辦公了。上個(gè)月末,我們這個(gè)問(wèn)題已經(jīng)解決的比較好。我們還規(guī)劃了未來(lái)的N+2,N+3應(yīng)該怎么去優(yōu)化。因?yàn)闄C(jī)電一體化本來(lái)就是很難很難的一個(gè)技術(shù)。它是純硬件的,它對(duì)材料工藝,先進(jìn)的封裝都有很高的要求。正因?yàn)樗莻€(gè)長(zhǎng)賽道,我們認(rèn)為是有機(jī)會(huì)把它解決掉的。
最后一條線,就是性能這條線。我們發(fā)現(xiàn)2億像素,這個(gè)圖像的數(shù)據(jù)信息特別多。因?yàn)樗臄?shù)據(jù)量特別大,平臺(tái)處理起來(lái)花費(fèi)的時(shí)間更長(zhǎng),需要的內(nèi)存Memory占用更多,系統(tǒng)的通路功耗更大。你會(huì)發(fā)現(xiàn)這三個(gè)問(wèn)題的挑戰(zhàn)是空前的。這三類問(wèn)題如果不解決,其實(shí)用戶沒(méi)有一個(gè)很好的體驗(yàn)。我們跟平臺(tái)廠商,以及我們的自研芯片,和三星Sensor(圖像傳感器)在聯(lián)合調(diào)優(yōu)這個(gè)維度花費(fèi)了很大的時(shí)間。目前來(lái)看基本的體驗(yàn),我覺(jué)得靠齊X100 Pro應(yīng)該是沒(méi)問(wèn)題的。
除了像X100 Ultra這樣的旗艦產(chǎn)品,之后vivo會(huì)不會(huì)考慮在其他產(chǎn)品系列上也搭載超高像素長(zhǎng)焦鏡頭呢?
一項(xiàng)技術(shù)的推廣,它的背后因素是比較多的。第一個(gè)就是看消費(fèi)者的需求,第二個(gè)是看產(chǎn)品的定位或者目標(biāo)人群。目前中高端的機(jī)會(huì)是比較大的,因?yàn)楹芏嗉夹g(shù)的下放需要一個(gè)過(guò)程。
從技術(shù)層面,其實(shí)潛望長(zhǎng)焦它有兩個(gè)問(wèn)題未來(lái)需要迭代優(yōu)化的,而這些方向是會(huì)持續(xù)進(jìn)步的。一個(gè)是體積大。第二個(gè)是特別貴,現(xiàn)在的潛望(長(zhǎng)焦)的成本已經(jīng)遠(yuǎn)高于主攝。這兩條是會(huì)限制它在更多的、比如說(shuō)中端機(jī)器上去用,但是這兩條技術(shù)路徑,我們已經(jīng)跟包括三星Sensor(圖像傳感器),三星電機(jī)在內(nèi)的上下游合作伙伴在做N+2,N+3的技術(shù)功課了。
比方說(shuō)潛望(長(zhǎng)焦)又重又大怎么解?一個(gè)是新材料,一個(gè)是先進(jìn)的封裝技術(shù)。這兩條其實(shí)我們都有路徑。通過(guò)新材料,通過(guò)先進(jìn)的工藝,我們會(huì)把良率、把成本控制到一個(gè)比較良好的階段。這樣的話當(dāng)我們解決這兩個(gè)重大的難題的時(shí)候,未來(lái)往中端機(jī)器去普及??梢灶A(yù)見(jiàn)未來(lái)兩到三年,高像素潛望(長(zhǎng)焦)都是最核心的這個(gè)方向。
-
圖像傳感器
+關(guān)注
關(guān)注
68文章
1912瀏覽量
129627 -
三星半導(dǎo)體
+關(guān)注
關(guān)注
0文章
66瀏覽量
16605 -
vivo
+關(guān)注
關(guān)注
12文章
3307瀏覽量
63508 -
AI大模型
+關(guān)注
關(guān)注
0文章
320瀏覽量
337
原文標(biāo)題:三星ISOCELL HP9攜手vivo X100 Ultra: 共同探索高像素長(zhǎng)焦技術(shù)的未來(lái)
文章出處:【微信號(hào):sdschina_2021,微信公眾號(hào):三星半導(dǎo)體和顯示官方】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論