IT之后是DT,從數(shù)據(jù)中掘金、向數(shù)據(jù)要效益漸成共識,但首先你需要的是一套趁手的工具。
數(shù)據(jù)中的價(jià)值只有用起來才是真正的價(jià)值,現(xiàn)實(shí)情況卻是企業(yè)生產(chǎn)活動中產(chǎn)生的數(shù)據(jù)中只有不到2%被保存,而其中得到分析利用的不足10%;并且企業(yè)普遍存在煙囪式業(yè)務(wù)系統(tǒng),導(dǎo)致數(shù)據(jù)管理、應(yīng)用效率低。“接入難、分析難、消費(fèi)難”已經(jīng)成為充分釋放數(shù)據(jù)價(jià)值所必須翻越的三座大山。
“世上無難事,只要肯登攀”,6月5日,華為在北京發(fā)布智能數(shù)據(jù)解決方案FusionData,支持智能的數(shù)據(jù)全生命周期管理,從數(shù)據(jù)接入、數(shù)據(jù)處理和數(shù)據(jù)使能三個(gè)層面重定義數(shù)據(jù)基礎(chǔ)設(shè)施;讓數(shù)據(jù)“存得下、流得動、算得快、用得好”,變數(shù)據(jù)資源為數(shù)據(jù)資產(chǎn);打造世界領(lǐng)先的數(shù)據(jù)湖解決方案,幫助客戶擁抱行業(yè)數(shù)字化。這亦是其所推動的“數(shù)據(jù)+智能”新一輪進(jìn)化的一部分,用華為IT產(chǎn)品線副總裁、智能數(shù)據(jù)與存儲領(lǐng)域總裁周躍峰的話說,F(xiàn)usionData是華為多年來積累的結(jié)果,希望將這些核心能力開放出來為中國的產(chǎn)業(yè)界作出貢獻(xiàn)。
“數(shù)據(jù)+智能”:新一輪進(jìn)化到來
從農(nóng)業(yè)經(jīng)濟(jì)、工業(yè)經(jīng)濟(jì)到數(shù)字經(jīng)濟(jì),數(shù)據(jù)已經(jīng)成為新生產(chǎn)資料,智能則成為了新生產(chǎn)力,華為Cloud & AI產(chǎn)品與服務(wù)總裁侯金龍?jiān)诎l(fā)言中說。
隨著5G、AI、IoT等數(shù)字化技術(shù)的應(yīng)用與普及,在未來數(shù)據(jù)不是以十倍百倍增長,而將呈成千上萬倍增長。華為《全球產(chǎn)業(yè)展望(GIV)》預(yù)測,全球數(shù)據(jù)量將從2018年32.5ZB快速增長到2025年的180ZB;IDC的《數(shù)據(jù)時(shí)代2025》白皮書亦預(yù)測,2025年全球的數(shù)據(jù)量達(dá)到163ZB。恒如沙數(shù)的數(shù)據(jù)帶來了巨大的挑戰(zhàn)、也孕育了前所未有的機(jī)遇,其中的一個(gè)表征就是數(shù)字經(jīng)濟(jì)在經(jīng)濟(jì)總量中占比持續(xù)加大,成為驅(qū)動社會經(jīng)濟(jì)發(fā)展的新引擎。
中國信息通信產(chǎn)業(yè)研究院最新發(fā)布的《中國數(shù)字經(jīng)濟(jì)發(fā)展與就業(yè)白皮書(2018年)》顯示,2018年我國數(shù)字經(jīng)濟(jì)規(guī)模達(dá)到31.3萬億人民幣,占GDP的比重為34.8%;同時(shí),我國數(shù)字經(jīng)濟(jì)領(lǐng)域就業(yè)人數(shù)達(dá)到1.91億人,占當(dāng)年總就業(yè)人數(shù)的24.6%,同比增長11.5%,顯著高于同期全國總就業(yè)規(guī)模增速。
每一次新的生產(chǎn)力與新的生產(chǎn)資料結(jié)合,都會極大地促進(jìn)社會的進(jìn)步和發(fā)展。而“數(shù)據(jù)+智能”的結(jié)合,也產(chǎn)生了相同的效應(yīng),新一輪進(jìn)化正在到來——在北京,通過“數(shù)據(jù)+智能”,政務(wù)服務(wù)實(shí)現(xiàn)了“一門一號一窗一網(wǎng)”,讓數(shù)據(jù)多跑路、群眾少跑腿,業(yè)務(wù)辦理時(shí)間縮短了50%;在深圳,通過“數(shù)據(jù)+智能”,道路交通控制從“車看燈”變成了“燈看車”,讓城市交通更順暢,早高峰主干道車速提升了18%。
又比如在金融領(lǐng)域,傳統(tǒng)的風(fēng)控平臺并不能滿足100ms以內(nèi)的處理時(shí)間需求,基于大數(shù)據(jù)、AI等技術(shù)的華為金融實(shí)時(shí)風(fēng)控解決方案則交出了完美答卷。在6000多條風(fēng)控規(guī)則下,該方案對交易風(fēng)險(xiǎn)決策的響應(yīng)速度達(dá)到了30ms以內(nèi),讓金融企業(yè)的交易風(fēng)控從事后變成事中,自2016年在招商銀行部署以來已累計(jì)保護(hù)32億筆交易安全,助其大幅減少交易損失。
阻礙數(shù)據(jù)價(jià)值釋放的三座大山
越來越多的企業(yè)已經(jīng)意識到,數(shù)字化、智能化轉(zhuǎn)型的關(guān)鍵在于“數(shù)據(jù)+智能”,但主觀意愿與客觀現(xiàn)實(shí)之間存在著不小的鴻溝——由于多樣性數(shù)據(jù)、多樣性系統(tǒng)和多樣性業(yè)務(wù)的現(xiàn)狀,導(dǎo)致各行各業(yè)實(shí)現(xiàn)數(shù)據(jù)價(jià)值的過程中,普遍面臨數(shù)據(jù)接入難、數(shù)據(jù)融合分析難和數(shù)據(jù)消費(fèi)難三大難點(diǎn)。
“從數(shù)據(jù)中獲取價(jià)值,難就難在如何將各式各樣的數(shù)據(jù)匯聚到數(shù)據(jù)湖中,又如處理它們、使用它們,這絕非拿個(gè)瓢到湖里舀水那么簡單?!敝苘S峰在發(fā)布會后的媒體采訪中指出,首先以數(shù)據(jù)接入難而言,隨著應(yīng)用移動化的高速發(fā)展,企業(yè)前端應(yīng)用系統(tǒng)和應(yīng)用模塊達(dá)到上千個(gè)、后端平臺有數(shù)十個(gè),整個(gè)數(shù)據(jù)平臺有上萬個(gè)接入點(diǎn),導(dǎo)致系統(tǒng)前端和后端的數(shù)據(jù)接入很復(fù)雜。比如某公司,一條財(cái)經(jīng)數(shù)據(jù)就涉及30多個(gè)前端系統(tǒng),一個(gè)業(yè)務(wù)開發(fā)流程需要和400多個(gè)系統(tǒng)進(jìn)行數(shù)據(jù)對接。
其次在數(shù)據(jù)融合分析難方面,一個(gè)業(yè)務(wù)在分析過程中,往往需要從多個(gè)數(shù)據(jù)來源抽取數(shù)據(jù),經(jīng)過融合分析實(shí)現(xiàn)業(yè)務(wù)目標(biāo)。由于企業(yè)煙囪式架構(gòu)帶來的系統(tǒng)開發(fā)接口不統(tǒng)一、數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一、數(shù)據(jù)處理鏈路長等問題,使得數(shù)據(jù)融合分析成為一大難題。以某銀行精準(zhǔn)營銷為例,需要使用用戶注冊數(shù)據(jù)、消費(fèi)行為數(shù)據(jù)、位置數(shù)據(jù)等,這些數(shù)據(jù)分散在關(guān)系數(shù)據(jù)庫、MPPDB、Hadoop、 流計(jì)算等多種系統(tǒng)中,這些系統(tǒng)提供的接口標(biāo)準(zhǔn)有SQL、API等,數(shù)據(jù)存儲格式有文件、表格等,數(shù)據(jù)融合分析耗費(fèi)大量人力物力,最終該業(yè)務(wù)的實(shí)現(xiàn)耗費(fèi)了一個(gè)月之久。
最后就數(shù)據(jù)消費(fèi)難來看,其實(shí)質(zhì)就是數(shù)據(jù)用不好。以某公司為例,全公司共有130多萬張表,分散在各個(gè)業(yè)務(wù)系統(tǒng)中;經(jīng)過數(shù)據(jù)加工入湖的數(shù)據(jù)有14多萬張表,約占總數(shù)據(jù)量的11% ;經(jīng)過加工聚合后的主題庫表約5千張,不足總數(shù)據(jù)量的0.5%,無法應(yīng)對靈活多變的業(yè)務(wù)需求。
數(shù)據(jù)基礎(chǔ)設(shè)施是“數(shù)據(jù)+智能”的底座、是加速行業(yè)數(shù)字化轉(zhuǎn)型的核心驅(qū)動力、亦是構(gòu)筑智能世界的中臺,但在上述三座大山面前傳統(tǒng)的數(shù)據(jù)基礎(chǔ)設(shè)施卻力有不逮,像某老牌大廠的數(shù)據(jù)庫已經(jīng)飽受詬病,亟待更智能的數(shù)據(jù)解決方案出現(xiàn)。
FusionData:重定義數(shù)據(jù)基礎(chǔ)設(shè)施
“把數(shù)字世界帶入每個(gè)人、每個(gè)家庭、每個(gè)組織,構(gòu)建萬物互聯(lián)的智能世界”,正是這樣的企業(yè)愿景與使命使得華為將重定義數(shù)據(jù)基礎(chǔ)設(shè)施視作責(zé)無旁貸之舉,而其在計(jì)算、接入、存儲、處理和數(shù)據(jù)使能等領(lǐng)域的長期積累與重大突破將之化為了現(xiàn)實(shí)。
華為智能數(shù)據(jù)解決方案FusionData,包含數(shù)據(jù)接入、數(shù)據(jù)處理、數(shù)據(jù)使能等部件,通過匯聚各方數(shù)據(jù)提供“采-存-算-管-用”全生命周期處理能力,幫助打通全域數(shù)據(jù)連接、建立統(tǒng)一的數(shù)據(jù)平臺、提升實(shí)時(shí)數(shù)據(jù)服務(wù)能力。在其期許中,不久的將來可實(shí)現(xiàn)“一家企業(yè)一個(gè)數(shù)據(jù)湖、一座城市一個(gè)數(shù)據(jù)湖”,滿足居民的生產(chǎn)與生活、企業(yè)的運(yùn)營和發(fā)展、城市政府的管理和服務(wù)等各項(xiàng)需求,加速全社會的智能化進(jìn)程。
值得一提的是,華為用以重定義數(shù)據(jù)基礎(chǔ)設(shè)施的FusionData中的三個(gè)主要部件和模塊分別以一座城市和兩位偉人來命名,體現(xiàn)了其對行業(yè)數(shù)字化的理解和釋放數(shù)據(jù)價(jià)值的信心。比如FusionData的智能數(shù)據(jù)連接部件ROMA取“條條大路通羅馬”之意,通過多數(shù)據(jù)源接入、消息和API的統(tǒng)一管理、智能通道選擇等技術(shù)實(shí)現(xiàn)智能全連接,加速數(shù)據(jù)流動,讓應(yīng)用與數(shù)據(jù)連接更高效。
其引領(lǐng)多樣性計(jì)算的特性體現(xiàn)為支持1100多種應(yīng)用和異構(gòu)數(shù)據(jù)源接入,通過開放式數(shù)據(jù)接入框架可靈活接入第三方數(shù)據(jù)源;支持分布式消息和API的路由統(tǒng)一配置管理,輕松實(shí)現(xiàn)分布式消息和API服務(wù)的跨網(wǎng)跨域跨云集成,讓數(shù)據(jù)自由流動;支持?jǐn)?shù)據(jù)多通道傳輸,并且可根據(jù)數(shù)據(jù)特點(diǎn)智能選擇傳送通道,大幅提升數(shù)據(jù)接入效率。
FusionData的智能數(shù)據(jù)處理部件則包含分布式存儲FusionStorage、分布式數(shù)據(jù)庫GaussDB和智能大數(shù)據(jù)解決方案FusionInsight等,通過多類型數(shù)據(jù)融合存儲、融合分析引擎等技術(shù)實(shí)現(xiàn)從單一處理到智能融合處理,加速實(shí)現(xiàn)數(shù)據(jù)價(jià)值。其中,上個(gè)月剛剛發(fā)布的全球首款人工智能原生GaussDB得名于數(shù)學(xué)王子家高斯,顯然它被寄望于擁有如高斯一般的天才頭腦——GaussDB首次將人工智能技術(shù)融入分布式數(shù)據(jù)庫的全生命周期,可實(shí)現(xiàn)自運(yùn)維、自管理、自調(diào)優(yōu)、故障自診斷和自愈;并通過異構(gòu)計(jì)算創(chuàng)新框架充分發(fā)揮X86、ARM、GPU、NPU多種算力優(yōu)勢,在權(quán)威標(biāo)準(zhǔn)測試集TPC-DS上,性能比業(yè)界提升50%,排名第一。
智能數(shù)據(jù)處理部件提供的多類型數(shù)據(jù)融合存儲和融合分析引擎技術(shù)重定義了數(shù)據(jù)處理平臺,前者通過存儲與計(jì)算分離技術(shù),打破系統(tǒng)煙囪式建設(shè);通過智能分布式存儲的多協(xié)議融合技術(shù),實(shí)現(xiàn)一份數(shù)據(jù)同時(shí)支持?jǐn)?shù)據(jù)庫、大數(shù)據(jù)、AI等多種業(yè)務(wù)的分析需求,讓融合數(shù)據(jù)分析成為可能。而后者支持?jǐn)?shù)據(jù)庫、大數(shù)據(jù)、AI多引擎融合分析和多樣性算力統(tǒng)一調(diào)度;通過統(tǒng)一架構(gòu)降低海量數(shù)據(jù)處理難度,實(shí)現(xiàn)極簡分析。
FusionData的智能數(shù)據(jù)使能部件DAYU則得名于大禹,這位上古帝王最出名的即是治水功績。所謂“堵而抑之,不如疏而導(dǎo)之”,DAYU的作用亦是通過智能元數(shù)據(jù)感知和OneQuery Tuobo技術(shù)構(gòu)建起數(shù)據(jù)處理與業(yè)務(wù)創(chuàng)新的橋梁,從而提升業(yè)務(wù)體驗(yàn)、讓業(yè)務(wù)更敏捷。
具體而言,智能元數(shù)據(jù)感知通過AI技術(shù)自動感知和采集多個(gè)系統(tǒng)的元數(shù)據(jù),并進(jìn)行智能化分級分類,生成全局統(tǒng)一的數(shù)據(jù)視圖,使得數(shù)據(jù)尋找秒級響應(yīng);OneQuery Tuobo則提供了統(tǒng)一的數(shù)據(jù)訪問接口,實(shí)現(xiàn)多數(shù)據(jù)源、多類型數(shù)據(jù)的統(tǒng)一訪問,簡化數(shù)據(jù)加工流程,令數(shù)據(jù)獲取速度提升10倍以上。
做大生態(tài):變技術(shù)突破為推動社會進(jìn)步的力量
“孤舉者難起,眾行者易趨”,盡管FusionData的功能已經(jīng)極為強(qiáng)大,也同樣需要一個(gè)成熟健全的生態(tài)系統(tǒng)才能真正把技術(shù)突破變成推動社會進(jìn)步的力量。
已經(jīng)從構(gòu)建生態(tài)、融入生態(tài)中嘗到不少甜頭的華為顯然不會忘記這點(diǎn),實(shí)際上對于“如何做大智能數(shù)據(jù)基礎(chǔ)設(shè)施生態(tài)”這個(gè)問題已經(jīng)經(jīng)過了通盤考慮。周躍峰表示,隨著FusionData的推出,華為將會繼續(xù)在全球范圍與客戶和合作伙伴攜手創(chuàng)新,共建開放、合作、共贏的產(chǎn)業(yè)生態(tài)。
據(jù)介紹,這個(gè)生態(tài)的完善正從行業(yè)應(yīng)用、平臺工具、標(biāo)準(zhǔn)組織和社區(qū)三個(gè)層面著手進(jìn)行。目前為止,F(xiàn)usionData已經(jīng)服務(wù)于全球60多個(gè)國家及地區(qū)的1500多個(gè)客戶、擁有500多家商業(yè)合作伙伴,并廣泛應(yīng)用于金融、運(yùn)營商、政府、大企業(yè)等行業(yè)。
“華為持續(xù)優(yōu)化自有芯片、數(shù)據(jù)庫等產(chǎn)品的性能,讓它們可以跑的更好;同時(shí),華為與客戶和合作伙伴的合作嚴(yán)格遵循各個(gè)國家的法律法規(guī)。我們的產(chǎn)品能力會越來越強(qiáng)、生態(tài)會越來越強(qiáng),這也是很自然的(事情)。”周躍峰在采訪的最后如是展望道。
就在FusionData發(fā)布的第二天,我國5G商用牌照也正式頒發(fā)了,可以嗅到一個(gè)波瀾壯闊的大時(shí)代正在鋪呈開來。全社會、全行業(yè)的數(shù)字化、智能化將是其目標(biāo),對于數(shù)據(jù)價(jià)值的挖掘與釋放則是數(shù)字化、智能化的關(guān)竅所在——FusionData在手,相信我們終將見證這個(gè)目標(biāo)的實(shí)現(xiàn)。?
評論
查看更多