近日,2019年中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)(簡(jiǎn)稱“數(shù)博會(huì)”)在貴陽舉辦。期間,在領(lǐng)先科技成果發(fā)布會(huì)上,遼寧移動(dòng)與華為“基于多租戶模型構(gòu)建MPP(大規(guī)模并行處理)數(shù)據(jù)庫”聯(lián)合創(chuàng)新項(xiàng)目,榮獲“優(yōu)秀項(xiàng)目”獎(jiǎng),更好地驅(qū)動(dòng)大數(shù)據(jù)應(yīng)用。
1
攜手共贏,把握大數(shù)據(jù)時(shí)代商機(jī)
數(shù)博會(huì)不僅是全球首個(gè)以大數(shù)據(jù)為主題的博覽會(huì),更已成為全球大數(shù)據(jù)發(fā)展的風(fēng)向標(biāo)和國際性、權(quán)威性的成果交流平臺(tái)。
大數(shù)據(jù)時(shí)代背景下,數(shù)據(jù)的分析、組織和調(diào)度是信息價(jià)值挖掘的重要保障。MPP大規(guī)模并行處理架構(gòu)的數(shù)據(jù)庫系統(tǒng)因其具備良好的擴(kuò)展性、高性能、可靠性等特點(diǎn),正逐漸替代經(jīng)分系統(tǒng)中傳統(tǒng)數(shù)據(jù)倉庫系統(tǒng)。
但使用MPP數(shù)據(jù)庫時(shí)也面臨一些問題,其中最為突出的是多租戶同時(shí)使用時(shí),如何實(shí)現(xiàn)各租戶計(jì)算資源和存儲(chǔ)資源的隔離,即當(dāng)數(shù)據(jù)庫系統(tǒng)負(fù)載較高的時(shí)候,任務(wù)之間存在資源(CPU、I/O和內(nèi)存)競(jìng)爭(zhēng),以及避免任務(wù)之間由于資源競(jìng)爭(zhēng)導(dǎo)致資源互鎖的一些問題。
本次遼寧移動(dòng)與華為合作,基于華為的Node Group彈性集群架構(gòu)在MPP數(shù)據(jù)庫實(shí)現(xiàn)按租戶對(duì)系統(tǒng)資源(CPU、內(nèi)存、IO、存儲(chǔ))和數(shù)據(jù)的隔離,確保各應(yīng)用系統(tǒng)之間無干擾,合理地為各個(gè)應(yīng)用提供資源,保障各應(yīng)用能夠正常運(yùn)行。
同時(shí),在用戶資源隔離的基礎(chǔ)上,該項(xiàng)目的MPP數(shù)據(jù)庫還實(shí)現(xiàn)了租戶計(jì)算資源的彈性伸縮,可以充分利用其它租戶的空閑資源,不但保障了業(yè)務(wù)的正常運(yùn)行,還可實(shí)現(xiàn)資源利用率最大化。
例如,地市集市業(yè)務(wù)系統(tǒng)在9:00~18:00點(diǎn)為業(yè)務(wù)人員提供交互分析,該業(yè)務(wù)的訪問量和工作量波動(dòng)比較大,很難對(duì)資源做精準(zhǔn)評(píng)估。當(dāng)有業(yè)務(wù)人員提交比較復(fù)雜的關(guān)聯(lián)查詢時(shí)就會(huì)造成該資源池的利用率較高,反饋時(shí)間過長(zhǎng)。而互聯(lián)網(wǎng)中心業(yè)務(wù)分析等業(yè)務(wù),其執(zhí)行的周期和時(shí)間段又恰恰和地市集市的業(yè)務(wù)可以分開執(zhí)行,因此利用租戶資源的彈性伸縮特性,訪問高峰時(shí)完全可以借用互聯(lián)網(wǎng)中心業(yè)務(wù)分析等各業(yè)務(wù)模塊的空閑資源,提升地市集市的查詢效率,同時(shí)提升整體的資源利用率。
遼寧移動(dòng)采用華為MPP數(shù)據(jù)庫GaussDB構(gòu)建統(tǒng)一的大數(shù)據(jù)系統(tǒng),逐步替換目前多套多種的數(shù)據(jù)庫系統(tǒng),有效解決了傳統(tǒng)應(yīng)用分類建設(shè)造成的整體系統(tǒng)結(jié)構(gòu)復(fù)雜、系統(tǒng)利用率低等問題。
系統(tǒng)自2016年上線以來,GaussDB數(shù)據(jù)庫集群規(guī)模已達(dá)到80個(gè)節(jié)點(diǎn),系統(tǒng)擴(kuò)容750TB。支持700多個(gè)用戶的并行訪問。并逐步遷移多套核心系統(tǒng)至GaussDB數(shù)據(jù)庫平臺(tái),大幅簡(jiǎn)化整個(gè)數(shù)據(jù)平臺(tái)的復(fù)雜度,降低管理難度。GaussDB數(shù)據(jù)庫系統(tǒng)最終可以擴(kuò)展到1024節(jié)點(diǎn)、10PB容量,滿足遼寧移動(dòng)未來業(yè)務(wù)發(fā)展的需求。
同時(shí)該系統(tǒng)還支撐了盤錦市智慧城市運(yùn)行管理平臺(tái),可在旅游、交通、商圈及重點(diǎn)區(qū)域等方面有效為政府提供決策依據(jù)。在試用期間獲得高度評(píng)價(jià)。此外手機(jī)上網(wǎng)行為分析也支撐了遼寧電視臺(tái)春節(jié)大數(shù)據(jù)報(bào)告等需求,獲得了良好的社會(huì)效益。
2
持續(xù)創(chuàng)新,匠心打造
智能數(shù)據(jù)基礎(chǔ)設(shè)施“數(shù)據(jù)底座”
近年來,華為一直致力于為各行業(yè)構(gòu)建數(shù)據(jù)基礎(chǔ)設(shè)施,加速智能化進(jìn)程,“數(shù)據(jù)+智能”正在創(chuàng)造更多的商業(yè)價(jià)值、產(chǎn)業(yè)價(jià)值和社會(huì)價(jià)值,支撐“數(shù)據(jù)+智能”的數(shù)據(jù)基礎(chǔ)設(shè)施已成為ICT重要組成部分。
華為智能數(shù)據(jù)與存儲(chǔ)從計(jì)算、存儲(chǔ)和數(shù)據(jù)處理三個(gè)領(lǐng)域重定義數(shù)據(jù)基礎(chǔ)設(shè)施。對(duì)于計(jì)算領(lǐng)域,華為引領(lǐng)多樣性計(jì)算,推動(dòng)計(jì)算架構(gòu)多樣性發(fā)展,讓算力更充裕更經(jīng)濟(jì)。其次,在智能存儲(chǔ)領(lǐng)域,為應(yīng)對(duì)存儲(chǔ)效率低、管理復(fù)雜的問題,華為重定義存儲(chǔ)架構(gòu),推出FusionStorage 8.0智能分布式存儲(chǔ),可大幅提升效率,引領(lǐng)存儲(chǔ)智能化。同時(shí)在數(shù)據(jù)處理平臺(tái)領(lǐng)域,為應(yīng)對(duì)更實(shí)時(shí)和智能的需求分析,華為重定義數(shù)據(jù)處理平臺(tái)打造全球首款AI-Native數(shù)據(jù)庫GaussDB,使得數(shù)據(jù)分析更智能,全面加速實(shí)現(xiàn)數(shù)據(jù)價(jià)值。
GaussDB 數(shù)據(jù)庫是華為大數(shù)據(jù)解決方案的重要組成,匯聚全球數(shù)據(jù)庫頂尖專家,從2011年開始研發(fā)。大數(shù)據(jù)是華為ICT戰(zhàn)略的重要支柱,在全球布局8個(gè)研究所,持續(xù)進(jìn)行大規(guī)模研發(fā)投入。GaussDB作為華為研發(fā)的一款企業(yè)級(jí)數(shù)據(jù)倉庫產(chǎn)品,具備高性能、高可靠、高擴(kuò)展、高安全、易用特性,兼容標(biāo)準(zhǔn)ANSI SQL 99/2003語法和PostgreSQL生態(tài),為各行業(yè)PB級(jí)海量大數(shù)據(jù)分析提供有競(jìng)爭(zhēng)力的解決方案。
GaussDB在市場(chǎng)上不斷得到客戶的認(rèn)可,已廣泛應(yīng)用于國內(nèi)外金融、交通、運(yùn)營商、能源、電力、電商等領(lǐng)域的200+客戶,躋身業(yè)界一流數(shù)據(jù)倉庫產(chǎn)品行列,2016年、2017年、2018年連續(xù)三年在Gartner魔力象限排名中位列中國廠商第一。展望未來,華為智能數(shù)據(jù)與存儲(chǔ)將為智能時(shí)代構(gòu)筑數(shù)據(jù)基礎(chǔ)設(shè)施底座,把數(shù)字世界帶入每個(gè)人、每個(gè)家庭、每個(gè)組織,構(gòu)建萬物互聯(lián)的智能世界。
-
華為
+關(guān)注
關(guān)注
216文章
34437瀏覽量
251736 -
中國移動(dòng)
+關(guān)注
關(guān)注
22文章
5549瀏覽量
71163 -
MPP
+關(guān)注
關(guān)注
0文章
24瀏覽量
10595
原文標(biāo)題:遼寧移動(dòng)與華為的“數(shù)據(jù)庫”聯(lián)合創(chuàng)新項(xiàng)目,獲獎(jiǎng)啦
文章出處:【微信號(hào):gh_6ee649e83ee2,微信公眾號(hào):華為云與計(jì)算】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論