大數(shù)據(jù)技術(shù)概念解析

大數(shù)據(jù)技術(shù)當(dāng)中，在海量數(shù)據(jù)的存儲環(huán)節(jié)，涉及到兩個重要的概念，就是分布式數(shù)據(jù)存儲與數(shù)據(jù)庫，穩(wěn)定高效安全的數(shù)據(jù)存儲，才能為后續(xù)的計算分析環(huán)節(jié)，提供穩(wěn)固的支持。今天的大數(shù)據(jù)概念解析，我們來講講分布式存儲與數(shù)據(jù)庫。

進入大數(shù)據(jù)時代，數(shù)據(jù)特征發(fā)生了明顯的變化，數(shù)據(jù)規(guī)模大、非結(jié)構(gòu)化/半結(jié)構(gòu)化的數(shù)據(jù)多，使得大數(shù)據(jù)存儲本身也需要克服很多的問題。要實現(xiàn)大規(guī)模數(shù)據(jù)的計算分析加工等問題，對于企業(yè)而言，需要通過各種手段來解決相關(guān)的問題，比如說通過優(yōu)化存儲基礎(chǔ)設(shè)施，或者搭建高性能的大數(shù)據(jù)存儲框架等等。海量數(shù)據(jù)的存儲任務(wù)，針對于不同的應(yīng)用場景，往往需要因地制宜地選擇存儲方案，因此有了對象存儲、塊存儲、文件系統(tǒng)存儲等。

分布式文件/對象存儲系統(tǒng)

分布式存儲系統(tǒng)面向海量數(shù)據(jù)的存儲訪問與共享需求，提供基于多存儲節(jié)點的高性能，高可靠和可伸縮性的數(shù)據(jù)存儲和訪問能力，實現(xiàn)分布式存儲節(jié)點上多用戶的訪問共享。目前業(yè)界比較流行的分布式存儲系統(tǒng)包括：HDFS、OpenStack Swift、Ceph、GlusterFS、Lustre、AFS、OSS等。

分布式關(guān)系型數(shù)據(jù)庫

關(guān)系型數(shù)據(jù)庫是建立在關(guān)系模型基礎(chǔ)上的數(shù)據(jù)庫，借助于集合代數(shù)等數(shù)學(xué)概念和方法來處理數(shù)據(jù)庫中的數(shù)據(jù)。目前業(yè)界比較流行的分布式關(guān)系型數(shù)據(jù)庫包括：DRDS、TiDB、GreenPlum、Cobar、Aurora、Mycat等。

分析型數(shù)據(jù)庫

分析數(shù)據(jù)庫是面向分析應(yīng)用的數(shù)據(jù)庫，與傳統(tǒng)的數(shù)據(jù)庫不同，它可以對數(shù)據(jù)進行在線統(tǒng)計、數(shù)據(jù)在線分析、隨即查詢等發(fā)掘信息數(shù)據(jù)價值的工作。目前業(yè)界比較流行的分析型數(shù)據(jù)庫包括：Kylin、AnalyticDB、Druid、Clickhouse、Vertica、MonetDB、InfiniDB、LucidDB等。

圖數(shù)據(jù)庫

圖數(shù)據(jù)庫的基本含義是以“圖”這種數(shù)據(jù)結(jié)構(gòu)存儲和查詢數(shù)據(jù)，而不是存儲圖片的數(shù)據(jù)庫。目前業(yè)界比較流行的圖數(shù)據(jù)庫包括：Titan、Neo4J、ArangoDB、OrientDB、MapGraph、ALLEGROGRAPH等。

列存儲數(shù)據(jù)庫

列式數(shù)據(jù)庫是以列相關(guān)存儲架構(gòu)進行數(shù)據(jù)存儲的數(shù)據(jù)庫，主要適合于批量數(shù)據(jù)處理和即時查詢。目前業(yè)界比較流行的列存儲數(shù)據(jù)庫包括：Phoenix、Cassandra、Hbase、Kudu、Hypertable等。

文檔數(shù)據(jù)庫

文檔型數(shù)據(jù)庫是NoSQL中非常重要的一個分支，它主要用來存儲、索引并管理面向文檔的數(shù)據(jù)或者類似的半結(jié)構(gòu)化數(shù)據(jù)。目前業(yè)界比較流行的文檔型數(shù)據(jù)庫包括：MongoDb、CouchDB、OrientDB、MarkLogic等。

鍵值存儲數(shù)據(jù)庫

鍵值存儲（Key-Value）是NoSQL中，數(shù)據(jù)模型中比較簡單的一個了，主要就是用哈希表，通過對于鍵（Key）的查找來找到特定的數(shù)據(jù)。目前業(yè)界比較流行的鍵值存儲數(shù)據(jù)庫包括：Redis、Memcached、Tair等。關(guān)于大數(shù)據(jù)概念解析，分布式存儲與數(shù)據(jù)庫，以上就為大家做了一個簡單的介紹了。大數(shù)據(jù)存儲環(huán)節(jié)，涉及到分布式與數(shù)據(jù)庫，是需要重點去掌握的一部分，對于主流的技術(shù)架構(gòu)也需要有相應(yīng)程度的掌握。

目前業(yè)界比較流行的鍵值存儲數(shù)據(jù)庫包括：Redis、Memcached、Tair等。

關(guān)于大數(shù)據(jù)概念解析，分布式存儲與數(shù)據(jù)庫，以上就為大家做了一個簡單的介紹了。大數(shù)據(jù)存儲環(huán)節(jié)，涉及到分布式與數(shù)據(jù)庫，是需要重點去掌握的一部分，對于主流的技術(shù)架構(gòu)也需要有相應(yīng)程度的掌握。
責(zé)任編輯:tzh