多源零拷貝技術(shù)在數(shù)據(jù)存儲中起到了怎樣的作用？

在互聯(lián)網(wǎng)、云計算、AI、大數(shù)據(jù)等新智能應(yīng)用驅(qū)動的新數(shù)據(jù)時代下，數(shù)據(jù)存儲作為一切其他數(shù)據(jù)行為的基礎(chǔ)，扮演著越來越重要的角色。浪潮軟件定義存儲AS13000通過模塊化定義的方式，基于多源零拷貝技術(shù)實現(xiàn)多應(yīng)用高效共享一套存儲系統(tǒng)，提高數(shù)據(jù)應(yīng)用效率。

云計算、大數(shù)據(jù)、AI、物聯(lián)網(wǎng)等各種新智能應(yīng)用不斷涌現(xiàn)，帶來數(shù)據(jù)需求的改變。文件、對象等數(shù)據(jù)類型需求增多。一方面，傳統(tǒng)的文件系統(tǒng)存儲服務(wù)正被企業(yè)廣泛應(yīng)用；另一方面，有著鮮明的互聯(lián)網(wǎng)、大數(shù)據(jù)時代特點對象存儲，也越來越受到互聯(lián)網(wǎng)用戶青睞。

每一種存儲分別對應(yīng)不同的訪問協(xié)議，文件存儲主要操作對象是文件和文件夾，例如NFS協(xié)議；對象存儲協(xié)議則主要為S3、Swift。浪潮軟件定義存儲AS13000的優(yōu)勢即在于，通過模塊化定義的方式，實現(xiàn)了在同一存儲系統(tǒng)中可以同時支持文件、對象等多種存儲協(xié)議，讓用戶通過一套存儲系統(tǒng)即可支持企業(yè)各種應(yīng)用訪問存儲數(shù)據(jù)，大大節(jié)省TCO。

1什么是對象存儲？

對象存儲是一種新的采用扁平數(shù)據(jù)的組織形式，并提供基于HTTP協(xié)議的RESTful接口訪問的分布式存儲系統(tǒng)。它適用于一次寫入，多次讀取的非結(jié)構(gòu)化數(shù)據(jù)存儲的需求場景，例如文檔、圖像、視頻等網(wǎng)絡(luò)媒體文件。在云計算與大數(shù)據(jù)時代，對象存儲發(fā)展迅猛。

不過，目前業(yè)界的同類存儲產(chǎn)品，每種存儲系統(tǒng)只能提供1種或2種存儲協(xié)議。對于新增對象存儲需求的用戶，這就要求在多應(yīng)用環(huán)境中必須部署2套或2套以上的存儲系統(tǒng)，無疑增加了用戶的初始投資，且增大了后期維護(hù)和管理的難度。

浪潮軟件定義存儲AS13000則通過所提供的多源零拷貝技術(shù)，實現(xiàn)了在線存儲和大數(shù)據(jù)分析存儲的統(tǒng)一融合。企業(yè)的各種應(yīng)用在存取數(shù)據(jù)時，無需在存儲集群間進(jìn)行數(shù)據(jù)拷貝，而是通過文件系統(tǒng)方便地訪問對象存儲的數(shù)據(jù)，同時還可以高效實現(xiàn)大數(shù)據(jù)的分析和挖掘。

2對象存儲：通過多源零拷貝技術(shù)，共享一套存儲

多源零拷貝技術(shù)，是通過對NFS協(xié)議、HDFS文件協(xié)議和S3/Swift對象協(xié)議多種存儲協(xié)議的融合，來實現(xiàn)多應(yīng)用存取數(shù)據(jù)共享一套存儲系統(tǒng)的先進(jìn)技術(shù)。多源零拷貝技術(shù)既避免了數(shù)據(jù)在不同存儲之間來回拷貝的問題，又解決了用戶投資大、維護(hù)和管理難的問題。

多源零拷貝技術(shù)示意圖

浪潮軟件定義存儲AS13000之所以可以同時支持NFS、S3/Swift、HDFS（Hadoop分布式文件系統(tǒng)）訪問底層對象存儲，是因為采用了以下技術(shù)：

AS13000基于DOS設(shè)計和實現(xiàn)S3/Swift接口。它在S3/Swift接口基礎(chǔ)上封裝FS適配器，實現(xiàn)了HDFS接口和NFS接口的對接，從而實現(xiàn)大數(shù)據(jù)應(yīng)用程序和NFS應(yīng)用程序?qū)Υ鎯ο到y(tǒng)的訪問。

AS13000的對象應(yīng)用程序通過S3/Swift接口直接調(diào)用底層存儲系統(tǒng)，從而實現(xiàn)對象應(yīng)用程序?qū)ο髷?shù)據(jù)的上傳與下載。AS13000底層存儲是一個高可用、智能化的分布式對象存儲系統(tǒng)，支持自修復(fù)、自管理等底層數(shù)據(jù)管理功能，它向上提供UDOS訪問函數(shù)庫，能夠支持DOS、DFS和DBS等模塊的訪問。3提高對象存儲數(shù)據(jù)訪問效率

浪潮軟件定義存儲AS13000提供的多源零拷貝技術(shù)，避免了企業(yè)不同業(yè)務(wù)應(yīng)用數(shù)據(jù)在多存儲系統(tǒng)之間的拷貝，因此可以有效提升數(shù)據(jù)訪問效率，為多場景、多應(yīng)用的“互聯(lián)網(wǎng)+”用戶帶來了優(yōu)勢。

浪潮軟件定義存儲AS13000在醫(yī)療領(lǐng)域慢病跟蹤私有云存儲場景的應(yīng)用

目前，浪潮軟件定義存儲AS13000在各行各業(yè)已經(jīng)有了廣泛應(yīng)用。以醫(yī)療領(lǐng)域應(yīng)用為例，AS13000已經(jīng)應(yīng)用于慢病跟蹤私有云存儲解決方案。系統(tǒng)的數(shù)據(jù)來源包括病人公有云監(jiān)測數(shù)據(jù)、電子病歷文件及數(shù)據(jù)庫、PACS影像數(shù)據(jù)等多種渠道，通過Storming，Spark等流式和批量數(shù)據(jù)分析和運算，將HBASE開源數(shù)據(jù)集存儲到AS13000中，然后通過慢病檔案等應(yīng)用，對HBASE結(jié)果數(shù)據(jù)進(jìn)行前端展示，提供輔助治療決策及建議。

浪潮軟件定義存儲AS13000存儲系統(tǒng)的優(yōu)勢在于，支持原生多種文件/對象協(xié)議接口， 通過一套存儲集群，適配多種場景多個應(yīng)用，給醫(yī)院節(jié)省了硬件成本；與此同時，通過數(shù)據(jù)存儲融合，使得Spark、Storm讀取多源數(shù)據(jù)的效率提升，HBASE存儲數(shù)據(jù)效率也得到相應(yīng)提升，從而提升了整個存儲系統(tǒng)的訪問效率。