基于云平臺(tái)的多維數(shù)據(jù)分析的研究與應(yīng)用

　　在現(xiàn)今不斷發(fā)展的信息化社會(huì)中，企業(yè)產(chǎn)生了海量的數(shù)據(jù)資料。怎樣利用和分析這些數(shù)據(jù)，使得決策人員能夠以更簡(jiǎn)單易懂的方式看到查詢結(jié)果和數(shù)據(jù)，為企業(yè)提供有利的決策信息，成為企業(yè)關(guān)注的問(wèn)題。數(shù)據(jù)倉(cāng)庫(kù)和聯(lián)機(jī)分析處理是現(xiàn)在企業(yè)進(jìn)行數(shù)據(jù)分析使用的一種方式。目前市場(chǎng)上大多數(shù)的OLAP展示工具都需要安裝龐大的客戶端來(lái)支持各種報(bào)表的功能，并且價(jià)格昂貴，不為多數(shù)企業(yè)所選用；而對(duì)于開(kāi)源的OLAP展示工具，大部分只能提供簡(jiǎn)單的分析操作，不具備完整的報(bào)表工具，而且多采用關(guān)系型數(shù)據(jù)庫(kù)存儲(chǔ)數(shù)據(jù)，對(duì)數(shù)據(jù)的結(jié)構(gòu)性要求很好，同時(shí)缺少擴(kuò)展性、伸縮性和對(duì)海量數(shù)據(jù)的處理能力，在企業(yè)數(shù)據(jù)爆炸式增長(zhǎng)的情況下不能滿足企業(yè)數(shù)據(jù)分析的要求。云平臺(tái)的出現(xiàn)，為處理海量數(shù)據(jù)提供了新的出路。

　　云平臺(tái)具有處理海量信息的能力，結(jié)合這一特點(diǎn)進(jìn)行研究和分析，將多維數(shù)據(jù)分析系統(tǒng)架構(gòu)在云平臺(tái)上，使用云平臺(tái)的強(qiáng)大的計(jì)算、存儲(chǔ)能力以及高可靠性、高擴(kuò)展性的優(yōu)勢(shì)，使用Hive數(shù)據(jù)倉(cāng)庫(kù)處理和分析數(shù)據(jù)，將結(jié)果返回到展示層，然后使用JPivot、ExtJS等相關(guān)技術(shù)對(duì)結(jié)果進(jìn)行處理，形成簡(jiǎn)潔友好的報(bào)表展示。

　　本文首先分析了OLAP系統(tǒng)在國(guó)內(nèi)外發(fā)展的現(xiàn)狀，確定了本文以云平臺(tái)的Hive數(shù)據(jù)倉(cāng)庫(kù)和關(guān)系型數(shù)據(jù)相結(jié)合的角度進(jìn)行分析和研究實(shí)現(xiàn)，然后介紹了聯(lián)機(jī)分析處理（OLAP）、Hadoop平臺(tái)、Hive與關(guān)系型數(shù)據(jù)庫(kù)轉(zhuǎn)換工具、前臺(tái)顯示技術(shù)Jpivot等相關(guān)技術(shù)，然后進(jìn)行了云平臺(tái)上多維數(shù)據(jù)分析系統(tǒng)的架構(gòu)設(shè)計(jì)，分別從關(guān)系型數(shù)據(jù)庫(kù)部分和Hive數(shù)據(jù)倉(cāng)庫(kù)與關(guān)系數(shù)據(jù)庫(kù)同步的方面進(jìn)行系統(tǒng)的詳細(xì)設(shè)計(jì)和實(shí)現(xiàn)。本系統(tǒng)前臺(tái)釆用ExJS框架、后臺(tái)采用關(guān)系型數(shù)據(jù)庫(kù)和Hive數(shù)據(jù)倉(cāng)庫(kù)結(jié)合的形式對(duì)多維數(shù)據(jù)分析進(jìn)行支持，完成了整個(gè)系統(tǒng)的編碼工作，最后進(jìn)行測(cè)試。該系統(tǒng)完成了關(guān)系型數(shù)據(jù)庫(kù)和Hive數(shù)據(jù)倉(cāng)庫(kù)之間數(shù)據(jù)的同步，完成了報(bào)表設(shè)計(jì)，存儲(chǔ)和展示等的功能，同時(shí)實(shí)現(xiàn)了多維數(shù)據(jù)的鉆取、上卷、切片、切塊、旋轉(zhuǎn)等的OLAP操作。在論文的最后，對(duì)工作進(jìn)行了總結(jié)和展望。