共話技術融合與創(chuàng)新，2021數(shù)字視網(wǎng)膜創(chuàng)新應用論壇成功舉辦

12月28日，在鵬城實驗室的指導下，由新一代人工智能產(chǎn)業(yè)技術創(chuàng)新戰(zhàn)略聯(lián)盟（AITISA）主辦，國家“芯火”深圳基地（平臺）、杭州博雅鴻圖視頻技術有限公司承辦，深圳英飛拓科技股份有限公司、浙江大華技術股份有限公司、青島海信網(wǎng)絡科技股份有限公司、深圳市微納感知計算技術有限公司、深圳龍崗智能視聽研究院、浙江省北大信息技術高等研究院協(xié)辦的“2021數(shù)字視網(wǎng)膜創(chuàng)新應用論壇”在深圳大中華喜來登酒店隆重舉辦。

本次活動以“鵬城啟芯火，共創(chuàng)AI生態(tài)”為主題，鵬城實驗室聯(lián)合浙江省北大信息技術高等研究院、浙江大華技術股份有限公司、青島海信網(wǎng)絡科技股份有限公司、杭州博雅鴻圖視頻技術有限公司、深圳市微納感知計算技術有限公司等產(chǎn)、學、研、用單位共聚一堂，旨在助力行業(yè)內(nèi)擁有核心技術的企業(yè)聚集，破局數(shù)據(jù)孤島，形成密切的戰(zhàn)略合作，促進技術融合和創(chuàng)新，實現(xiàn)生態(tài)布局，最終服務于產(chǎn)業(yè)。讓數(shù)字視網(wǎng)膜向視頻領域更進一步的推廣應用，加速產(chǎn)品化運作，實現(xiàn)產(chǎn)業(yè)生態(tài)的融合發(fā)展。

大會由深圳市微納集成電路與系統(tǒng)應用研究院院長張國新先生主持，杭州博雅鴻圖視頻技術有限公司董事長賈惠柱先生做開場致辭，新一代人工智能產(chǎn)業(yè)技術創(chuàng)新戰(zhàn)略聯(lián)盟（AITISA）理事長高文院士作謝幕致辭。北京大學信息技術高等研究院院長顧問杜軍先生、北京大學信息技術高等研究院副院長羅偉節(jié)先生、深圳英飛拓科技股份有限公司董事長劉肇懷先生、深圳英飛拓科技股份有限公司總經(jīng)理劉新宇先生、浙江大華技術股份有限公司CEO張興明先生、深圳龍崗智能視聽研究院副院長安欣賞先生、青島新經(jīng)濟聯(lián)合會主席喻東先生、東莞易事特集團CTO于瑋先生、浙江省安全技術防范行業(yè)協(xié)會秘書長趙永華先生、華友會會長俞渭華先生、福田區(qū)河套深港科技創(chuàng)新合作區(qū)事物署代表等領導嘉賓及專業(yè)觀眾共一百余人出席了會議。

鵬城實驗室洪曉鵬：數(shù)字視網(wǎng)膜及其在智慧城市的應用

會上，鵬城實驗室教授洪曉鵬首先登臺并帶來《數(shù)字視網(wǎng)膜及其在智慧城市的應用》主題分享，他認為城市轉(zhuǎn)型發(fā)展的政策取向，主要是以智能制造、智慧應用為引領，來促進城市經(jīng)濟的轉(zhuǎn)型，“人腦+經(jīng)驗”的模式將在智慧化發(fā)展下演變?yōu)椤?a href="http://www.wenjunhu.com/v/tag/1247/" target="_blank">電腦+算法”的智能化模式，并覆蓋智能化涵蓋一二三產(chǎn)業(yè)。

智慧城市是城市發(fā)展的趨勢和必然，而城市大腦是智慧城市的核心，是算力和數(shù)據(jù)的匯聚地，是生產(chǎn)力和生產(chǎn)資料的集中展現(xiàn)，需要強有力的智能算力底座。不過，隨著城市攝像頭網(wǎng)絡系統(tǒng)快速增長，產(chǎn)生大量的圖像和視頻，從而形成大數(shù)據(jù)的大爆炸；而城市大腦的感應體系建設往往滯后于呈指數(shù)增長的數(shù)據(jù)，行業(yè)提出了視頻數(shù)據(jù)量與高效壓縮方法的需求，

為此，洪曉鵬提出，城市大腦應該向人腦學習分工協(xié)調(diào)，可采用仿生物視網(wǎng)膜的視覺計算架構(gòu)來優(yōu)化現(xiàn)存問題，讓智能化的端邊側(cè)使系統(tǒng)更靈活，在云側(cè)作為智能主體提供更強大智能資源，并優(yōu)化存儲傳輸使系統(tǒng)更經(jīng)濟。

會上，洪曉鵬同時重點分享了新型視覺編碼架構(gòu)，據(jù)他介紹，多層次視網(wǎng)膜可表示為：視頻編碼+特征編碼，其中，視頻編碼應對存儲和離線觀看的影像重構(gòu)（人），特征編碼則用于模式識別和場景理解的緊湊特征表示（機器）；且兩者可擴展聯(lián)合，模擬生物視網(wǎng)膜，支持視頻流與特征流聯(lián)合編碼優(yōu)化。

北大信息杜軍：基于數(shù)字視網(wǎng)膜為視覺智能產(chǎn)業(yè)賦能

接著，由北大信息技術高等研究院院長顧問、浙江智慧視頻安防創(chuàng)新中心有限公司董事長杜軍帶來《基于數(shù)字視網(wǎng)膜為視覺智能產(chǎn)業(yè)賦能》主題分享。

杜軍從北京大學信息技術高等研究院引出數(shù)字安防產(chǎn)業(yè)集群。據(jù)杜軍介紹，數(shù)字經(jīng)濟時代，杭州作為新崛起的明星城市和國際化大都市，正謀劃建設以智能視覺產(chǎn)業(yè)為主導的“中國視谷”，建設國內(nèi)領先、全球重要的視覺產(chǎn)業(yè)環(huán)境最優(yōu)地。同時，北大信研院參與《“中國視谷”建設方案》的編制和“中國視谷”的建設工作。

針對數(shù)字視網(wǎng)膜“新型視覺編碼架構(gòu)”，杜軍表示，將由城市大腦2.0中的“視頻流，特征流，模型流”多流結(jié)構(gòu)提供支持，當系統(tǒng)通過視覺收集視覺數(shù)據(jù)時，傳感器執(zhí)行高效的視頻數(shù)據(jù)編碼和特征提取，然后通過特征流和視頻傳輸?shù)匠鞘写竽X；同時城市大腦將采集到的數(shù)據(jù)用于學習，再將學習到的模型通過模型流發(fā)送到前端設備進行更新。杜軍認為，這種協(xié)同計算模式（視頻流、特征流和模型流）克服了端邊云環(huán)境中模型復用和傳輸?shù)钠款i。

分享中，杜軍同時對智慧安監(jiān)、智慧市場、智慧燈桿、高點大場景等實戰(zhàn)案例及應用效果展開了分享。

大華股份殷?。篈I，驅(qū)動數(shù)智未來

緊接著，由浙江大華技術股份有限公司研發(fā)中心副總裁、先進技術研究院、智慧城市研究院院長殷俊帶來《AI，驅(qū)動數(shù)智未來》主題分享。

殷俊表示，基于以視頻為核心的“全感知、全連接、全計算、全智能”領先能力，大華股份正在構(gòu)建行業(yè)領先的數(shù)智底座，并與行業(yè)共建共贏、推動產(chǎn)業(yè)全生態(tài)建設，加快產(chǎn)業(yè)化落地，驅(qū)動城市和企業(yè)可持續(xù)與創(chuàng)新發(fā)展。

其基于AIoT/物聯(lián)數(shù)智平臺兩大技術戰(zhàn)略向與會嘉賓分享了AI如何加速數(shù)據(jù)智慧化、如何優(yōu)化業(yè)務架構(gòu)、如何賦能產(chǎn)業(yè)落地等方案及方法論。

期間，殷俊也就環(huán)保行業(yè)場景化AI應用進行了詳細分解，殷俊表示，該方案的核心是國內(nèi)首創(chuàng)的雙云腦架構(gòu)，通過在政務網(wǎng)部署新城云腦，實現(xiàn)新區(qū)各管理單位數(shù)據(jù)打通，為公安、應急、交通運輸?shù)瘸鞘泄芾聿块T提供宏觀監(jiān)管、決策分析、橫向協(xié)同共治等服務；同時在互聯(lián)網(wǎng)部署海信云腦，串聯(lián)居民家庭、社區(qū)、城市醫(yī)院、學校、商場等千業(yè)百態(tài)的場景，通過智通城、信我家平臺、海信愛家平臺等為老百姓提供統(tǒng)一服務入口。

海信網(wǎng)絡劉微：數(shù)字視網(wǎng)膜技術在交通及公安等行業(yè)實戰(zhàn)應用

隨后，青島海信網(wǎng)絡科技公司公共安全事業(yè)部本部總經(jīng)理劉微博士帶來《數(shù)字視網(wǎng)膜技術在交通及公安等行業(yè)實戰(zhàn)應用》主題分享。

據(jù)《中商產(chǎn)業(yè)研究院》報告，到2020年底，全國視頻監(jiān)控市場規(guī)模將突破3000億元，近幾年市場復合增長率約16%。另據(jù)《三勝咨詢》統(tǒng)計，國內(nèi)智能攝像機市場規(guī)模預計到2020年超過100億元。未來市場復合增長率約25%。劉微博士認為，前端智能設備的增長率遠高于行業(yè)增長率，前端智能化是大勢所趨。

會上，劉微博士從電子警察發(fā)展歷程、視頻AI應用影響因素、聲像一體機等角度分享了數(shù)字視網(wǎng)膜技術在實踐過程中遇到的各類工程問題，如編解碼對圖像的損失、網(wǎng)絡卡頓、傳輸丟包等，劉微博士據(jù)此表示，AI前移已成為不可逆轉(zhuǎn)的趨勢，從源頭實現(xiàn)AI檢測，提升AI的高精準應用。

劉微博士同時分享其實戰(zhàn)成果，據(jù)了解，海信網(wǎng)絡在實踐中，形成了突出雙向交互、獨立智能體的理念，對于客戶來說，由被動監(jiān)控轉(zhuǎn)變?yōu)橹鲃臃?，由事后查看轉(zhuǎn)變?yōu)槭轮刑幹?；實現(xiàn)能看、能聽、會說話，及時發(fā)現(xiàn)、現(xiàn)場即時反饋應用，同時，創(chuàng)新性配置低功耗藍牙模塊，可與手機端數(shù)據(jù)交互，配合實現(xiàn)身份確認、主動服務等。

以高點監(jiān)控方案為例，可以解決視野窄、目標跟蹤難等問題，實現(xiàn)道路擁堵、路口排隊、出口道溢出、異常停車4類事件預警。

在交通事故檢測與處警中，視網(wǎng)膜應用適用于城市交通、高速公路兩大類交通場景，覆蓋日間全時段及晴、陰、雨、雪、霧5類天氣情況；以及包括車車事故、單車肇事、機非事故、機動車行人事故、高速事故5類事故檢測，預警準確率達90%以上。

會上，劉微博士還分享了基于視網(wǎng)膜技術實現(xiàn)的異常行為檢測，如吸煙、打電話、煙火偵測、人員離崗分析等多種異常行為檢測算法，根據(jù)場景需求靈活配置智能分析策略，實現(xiàn)實時有效報警，還可進行聲光報警進行勸阻并加以制止。

博雅鴻圖辛博：數(shù)字視網(wǎng)膜芯片及系統(tǒng)應用

杭州博雅鴻圖視頻技術有限公司副總裁辛博博士帶來的是《數(shù)字視網(wǎng)膜芯片及系統(tǒng)應用》主題分享，其認為，仿生物視覺的高效視覺計算技術適用于智慧城市、安防分監(jiān)控、智慧工廠、智能制造等視覺應用場景。

據(jù)辛博博士介紹，數(shù)字視網(wǎng)膜具有全網(wǎng)/全局時間戳、高效編解碼技術、主動交互式感知中樞等特點，近年，博雅鴻圖致力于數(shù)字視網(wǎng)膜芯片的研發(fā)，提供有編碼IP核芯片、解碼芯片等完整解決方案，為數(shù)字視網(wǎng)膜的創(chuàng)新應用提供強有力的底層支撐。

會上，辛博博士重點分享了GV9531這款自主可控芯片，據(jù)其介紹，該產(chǎn)品使用了國產(chǎn)自主的CPU，支持AVS2、H.264、H.265壓縮格式，可提供更通用的算力平臺，支持完整的視頻接入接口，并內(nèi)置有豐富的結(jié)構(gòu)化算法，以及軟件SDK開發(fā)，讓下游廠商可以更靈活地開發(fā)AI應用。

需要指出的是，該產(chǎn)品還提供有數(shù)字視網(wǎng)膜中樞神經(jīng)系統(tǒng)，可以盡可能地放大該芯片在視頻領域的處理能力，可以提供完整的數(shù)字視網(wǎng)膜閉環(huán)應用場景。辛博博士同時就該產(chǎn)品在數(shù)據(jù)湖、公安場景應用、互聯(lián)網(wǎng)視頻編解碼、城市大腦等實戰(zhàn)案例進行了分享。

微納王丹：機器聽覺助力智慧城市建設

最后，深圳市微納感知計算技術有限公司CEO王丹給與會者帶來《機器聽覺助力智慧城市建設》的主題分享。王丹認為，目前視覺技術發(fā)展已經(jīng)相對成熟，但聽覺應用仍有待提升和實戰(zhàn)。

王丹認為，可以通過多麥克風的方案來賦能智慧城市實戰(zhàn)應用。在智能交通領域，如違法鳴笛、改裝炸街等視覺無法捕捉的感知信息，通過微納靈聽智能交通解決方案即可實現(xiàn)，該方案集成的專業(yè)定向聲學雷達，通過核心機器聽覺算法實現(xiàn)濾除環(huán)境干擾噪聲（車輛引擎聲、剎車聲、建筑噪聲等），并能精準鎖定目標聲源位置，定位違法車輛，合網(wǎng)絡攝像頭將實時生成可視化聲音云圖，自動識別車牌取證，提供執(zhí)法證據(jù)。

此外，在公安信息化建設大潮中，也有著很強的音頻采集需求。微納對此提出了微納靈聽公檢法解決方案，通過“智能拾音終端+智能音頻分析平臺+云計算管理平臺”方案，可實現(xiàn)高保真語音及聲紋采集，并能在1對1審訊、談話中對分離聲源；同步支持聲紋識別、多語言語音轉(zhuǎn)錄等功能，助力公安建設重點人員聲紋庫，便捷化司法審訊，提高破案率。

在平安城市中，同樣亟需更優(yōu)質(zhì)的音視頻監(jiān)控系統(tǒng)，對此，微納靈聽平安城市解決方案將Link Ear Array技術、Link Ear Local AI技術與平安城市監(jiān)控系統(tǒng)結(jié)合，實現(xiàn)基于異常聲音事件檢測及特定目標空間位置觸發(fā)的音視聯(lián)動處理。

最后，王丹也就微納靈聽在智慧路燈、智慧園區(qū)、平安校園、戶外廣場、智慧社區(qū)等行業(yè)的實踐案例進行了分享。

主題分享后，大華股份、海信網(wǎng)絡、博雅鴻圖、微納感知4家單位，在高文院士、趙永華先生、羅偉節(jié)先生、劉肇懷先生、賈惠柱先生、張國新先生的見證下，就數(shù)字視網(wǎng)膜應用進行了戰(zhàn)略合作簽約，旨在共同推進數(shù)字視網(wǎng)膜創(chuàng)新發(fā)展。

論壇最后，由新一代人工智能產(chǎn)業(yè)技術創(chuàng)新戰(zhàn)略聯(lián)盟理事長高文院士致辭，高院士表示，數(shù)字視網(wǎng)膜的推進已有3年時間，目前理論框架已較為清晰，但在應用中，仍需完善和演進。目前，數(shù)字視網(wǎng)膜已開始導入云端，在人、車、物的檢測應用中，擁有更豐富的場景訓練，有助于增強平臺系統(tǒng)的實戰(zhàn)能力，未來，多模態(tài)版本將會覆蓋視頻、聲音等感知數(shù)據(jù)，同時也將提升數(shù)據(jù)感知的密集度。

高院士同時提醒道，數(shù)字視網(wǎng)膜創(chuàng)新應用仍處于初始階段，需行業(yè)同仁加強合作、加大創(chuàng)新力度，共同推進數(shù)字視網(wǎng)膜向更高層次演進，以更高起點實現(xiàn)技術落地，提升行業(yè)賦能價值。