0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

希捷CORTX加速對(duì)象存儲(chǔ)創(chuàng)新,數(shù)據(jù)的開源普惠

工程師鄧生 ? 來(lái)源:中關(guān)村在線 ? 作者:徐鵬 ? 2020-11-30 14:38 ? 次閱讀

數(shù)字經(jīng)濟(jì)正在成為現(xiàn)代社會(huì)發(fā)展的重要指標(biāo),數(shù)據(jù)作為數(shù)字經(jīng)濟(jì)體中的核心資源,也扮演著更加關(guān)鍵的角色。在指數(shù)級(jí)增長(zhǎng)的數(shù)據(jù)規(guī)模背后,如何高效處理紛繁復(fù)雜的數(shù)據(jù)集和數(shù)據(jù)類型,是每家企業(yè)都在思考的問(wèn)題,尤其是當(dāng)非結(jié)構(gòu)化數(shù)據(jù)變成了企業(yè)內(nèi)部未經(jīng)開發(fā)的“重要價(jià)值”。“數(shù)據(jù)中蘊(yùn)藏著無(wú)盡的價(jià)值,企業(yè)的成功與數(shù)據(jù)價(jià)值的挖掘息息相關(guān)。希捷持續(xù)秉承開放、共享及合作的原則,進(jìn)行技術(shù)突破和產(chǎn)品創(chuàng)新?!痹贚et’s Rethink Data希捷科技線上峰會(huì)上,希捷科技全球副總裁暨中國(guó)區(qū)總裁孫丹表示。

而希捷此次發(fā)布的對(duì)象存儲(chǔ)軟件CORTX和CORTX開源社區(qū),就是開放合作和技術(shù)創(chuàng)新的最佳實(shí)踐,同時(shí),希捷還推出了融合基礎(chǔ)架構(gòu)解決方案Lyve Drive Rack。由此,CORTX也上升為公司的重要戰(zhàn)略之一。根據(jù)希捷以IDC調(diào)研為基礎(chǔ)發(fā)布的《數(shù)據(jù)新視界:從邊緣到云,激活更多業(yè)務(wù)數(shù)據(jù)》報(bào)告,未來(lái)兩年,企業(yè)數(shù)據(jù)將會(huì)以42.2%的速度增長(zhǎng)。數(shù)據(jù)的多元化不僅對(duì)計(jì)算的異構(gòu)性提出新需求,其密集型工作負(fù)載對(duì)數(shù)據(jù)的存儲(chǔ)、治理、運(yùn)營(yíng)同樣挑戰(zhàn)巨大。CORTX的發(fā)布,簡(jiǎn)單來(lái)說(shuō)就是幫助企業(yè)客戶部署導(dǎo)入更為優(yōu)化的數(shù)據(jù)存儲(chǔ)架構(gòu)。

無(wú)論是傳統(tǒng)企業(yè)的數(shù)據(jù)挖掘和云化轉(zhuǎn)型,還是互聯(lián)網(wǎng)企業(yè)的超大規(guī)模數(shù)據(jù)中心建設(shè),要想存儲(chǔ)更多的數(shù)據(jù),最直接的方法就是利用技術(shù)紅利讓硬盤存得更多、成本更低。但是落地到客戶一側(cè),考慮到采購(gòu)周期、部署成本、內(nèi)部流程、操作難易度等因素,并不是每家企業(yè)都會(huì)在第一時(shí)間用上最新的產(chǎn)品,而軟件化的交付和開源技術(shù),則可以快速讓客戶使用大容量硬盤,有效降低TCO。要知道,以往軟件+硬件綁定“賣盒子”的方式在一定程度上拖累了企業(yè)采用新產(chǎn)品的進(jìn)度。

IDC預(yù)測(cè),到2025年全球數(shù)據(jù)總量將達(dá)到175ZB。在企業(yè)組織的存儲(chǔ)系統(tǒng)中,非結(jié)構(gòu)化數(shù)據(jù)占據(jù)了數(shù)據(jù)總量的80%-90%。無(wú)論是金融行業(yè)的數(shù)據(jù)分析還是醫(yī)療行業(yè)的影像資料,亦或是教育行業(yè)的教學(xué)文檔、媒體行業(yè)的音視頻素材等等,都可以看到非結(jié)構(gòu)化數(shù)據(jù)的影子。然而在非結(jié)構(gòu)化數(shù)據(jù)高占比的趨勢(shì)之下,僅有極少的數(shù)據(jù)被有效利用,其原因在于企業(yè)缺乏有效的使用途徑,如對(duì)象存儲(chǔ)曾被認(rèn)為是一種僅用于合規(guī)、歸檔、次級(jí)或冷數(shù)據(jù)的存儲(chǔ),但如今并非如此。

事實(shí)上,已有越來(lái)越多的企業(yè)在使用對(duì)象存儲(chǔ)支撐實(shí)時(shí)、智能化、高性能的工作負(fù)載,除了要滿足性能和存儲(chǔ)擴(kuò)展性的需求,還要獲得數(shù)據(jù)洞察以便更好地做出決策。與此同時(shí),更好、更快的數(shù)據(jù)訪問(wèn)能夠讓非結(jié)構(gòu)化數(shù)據(jù)成為營(yíng)收增長(zhǎng)的重要推動(dòng)力。調(diào)查顯示,只要數(shù)據(jù)可訪問(wèn)性增加10%,就能帶來(lái)超過(guò)6500萬(wàn)美元的額外凈收入。為了更好地激活數(shù)據(jù),企業(yè)需要開放的架構(gòu)、新的管理策略,來(lái)快速地整合并分析海量的、動(dòng)態(tài)的數(shù)據(jù)。

“我們把CORTX開源之后,希望大家都可以在上面開發(fā)自己的對(duì)象存儲(chǔ)應(yīng)用,快速使用到希捷的大容量硬盤。”孫丹談到,“我們是最了解大容量數(shù)據(jù)和軟件兼容的供應(yīng)商,我們可以完全不受硬件限制,客戶只需要用我們的軟件平臺(tái),當(dāng)然用其它硬件也可以,我們已經(jīng)針對(duì)大容量硬盤設(shè)計(jì)好了配套的對(duì)象存儲(chǔ)軟件平臺(tái)。”由此,傳統(tǒng)客戶和服務(wù)商可以不受技術(shù)門檻的限制,第一時(shí)間使用到最新的存儲(chǔ)技術(shù)和產(chǎn)品。

據(jù)了解,CORTX兼容swift、S3等主流云服務(wù)商使用的所有對(duì)象存儲(chǔ)軟件,在應(yīng)用時(shí)可以混用不同容量硬盤,而不會(huì)影響性能和兼容性,實(shí)現(xiàn)利舊最大化。結(jié)合硬件參考解決方案,用戶可以對(duì)硬件進(jìn)行定制化配置,集成一些第三方組件,如針對(duì)I/O進(jìn)行優(yōu)化的軟件等等。

借助CORTX,可以將HAMR、MACH.2等技術(shù)快速普惠到客戶的業(yè)務(wù)場(chǎng)景中,大容量盤的替換可以在有限空間內(nèi)大幅節(jié)省部署成本。以某客戶部署可靠性11個(gè)9的對(duì)象存儲(chǔ)集群為例,相較傳統(tǒng)的Ceph,使用CORTX結(jié)合高密度存儲(chǔ)硬件可讓每TB造價(jià)降低一半。

與CORTX對(duì)象存儲(chǔ)相結(jié)合,Lyve Drive Rack提供了一種緊密集成的融合基礎(chǔ)架構(gòu)解決方案,容量最高可達(dá)1.7PB,無(wú)需支付高昂的存儲(chǔ)軟件授權(quán)費(fèi)用。Lyve Drive Rack能在一致的對(duì)象、鍵值、文檔和集群中實(shí)現(xiàn)可擴(kuò)展的性能,采用100%開源代碼,可降低對(duì)固定供應(yīng)商的依賴,并且不限供應(yīng)商的管理界面,兼容SSPL和Redfish/Swordfish。

Lyve Drive Rack

希捷科技中國(guó)區(qū)資深解決方案工程師李蓁介紹稱,希捷的對(duì)象存儲(chǔ)解決方案在設(shè)計(jì)之初就針對(duì)AI、機(jī)器學(xué)習(xí)等特性進(jìn)行了調(diào)優(yōu),用戶可以直接在CORTX上標(biāo)注數(shù)據(jù),內(nèi)置的內(nèi)存鍵值對(duì)能夠做到高效檢索。同時(shí),Lyve Drive Rack還利用專有芯片大幅降低了糾刪碼使用時(shí)所需的配置內(nèi)存,通過(guò)將糾刪碼卸載到專用ASIC以確保多層數(shù)據(jù)保護(hù),實(shí)現(xiàn)了更大數(shù)據(jù)集的數(shù)據(jù)彈性。

從數(shù)據(jù)的端到端管理到數(shù)據(jù)運(yùn)營(yíng),復(fù)雜的工作場(chǎng)景和多平臺(tái)遷移對(duì)數(shù)據(jù)的采集、存儲(chǔ)、分析提出了更高的要求,供應(yīng)商不僅要應(yīng)對(duì)指數(shù)增長(zhǎng)的數(shù)據(jù)規(guī)模,還要解決企業(yè)內(nèi)部和流程中的數(shù)據(jù)拉通和管理問(wèn)題,并根據(jù)數(shù)據(jù)訓(xùn)練和推理給出預(yù)測(cè)。數(shù)據(jù)管理階段,希捷會(huì)集成第三方組件,如CORTX部署硬件時(shí)結(jié)合VMware等解決方案,之后接入HAMR HDD,通過(guò)各類軟硬件結(jié)合的形式覆蓋數(shù)據(jù)的全生命周期。

“從一開始熱度高的時(shí)候,我們可以結(jié)合第三方的組件來(lái)實(shí)現(xiàn)數(shù)據(jù)訪問(wèn)更高效的響應(yīng)。”李蓁表示,“到了數(shù)據(jù)生命周期的中后期,可以通過(guò)CORTX軟件,再把數(shù)據(jù)進(jìn)行分層,把這些已經(jīng)熱度降低的數(shù)據(jù)存入到HDD硬盤里面,實(shí)現(xiàn)數(shù)據(jù)保存效率的提升以及成本的降低。”

CORTX可以幫助企業(yè)進(jìn)行超大規(guī)模存儲(chǔ)架構(gòu)的應(yīng)用和普及,實(shí)現(xiàn)有效、快速且經(jīng)濟(jì)地部署對(duì)象存儲(chǔ),打開數(shù)據(jù)新視界的新征程。據(jù)悉,希捷科技的8家中國(guó)客戶與合作伙伴新華三集團(tuán)、同有科技、宏杉科技、UIT創(chuàng)新科、五舟科技、鯨鯊軟件、極道科技以及柏科數(shù)據(jù)等,將就CORTX開源軟件與開源社區(qū),與希捷展開更深層次的合作,共同提升對(duì)象存儲(chǔ)解決方案。“希捷將繼續(xù)與業(yè)界合作伙伴緊密攜手,針對(duì)市場(chǎng)需求以及應(yīng)用特點(diǎn),共同推出更為定制化的、契合需求的解決方案,助力企業(yè)的數(shù)字化轉(zhuǎn)型征程,為發(fā)揮數(shù)字生產(chǎn)力的極致價(jià)值而努力?!睂O丹說(shuō)。

責(zé)任編輯:PSY

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 希捷
    +關(guān)注

    關(guān)注

    2

    文章

    211

    瀏覽量

    41658
  • 開源
    +關(guān)注

    關(guān)注

    3

    文章

    3368

    瀏覽量

    42564
  • 對(duì)象存儲(chǔ)
    +關(guān)注

    關(guān)注

    0

    文章

    68

    瀏覽量

    11992
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    8896

    瀏覽量

    137511
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    HarmonyOS Next 應(yīng)用元服務(wù)開發(fā)-分布式數(shù)據(jù)對(duì)象遷移數(shù)據(jù)權(quán)限與基礎(chǔ)數(shù)據(jù)

    提供了async版本供該場(chǎng)景使用。 當(dāng)前,wantParams中“sessionId”字段在遷移流程中被系統(tǒng)占用,建議開發(fā)者在wantParams中定義其他key值存儲(chǔ)該分布式數(shù)據(jù)對(duì)象生成的id,避免
    發(fā)表于 12-24 09:40

    關(guān)于對(duì)象存儲(chǔ)和云硬盤區(qū)別,你了解多少?

    對(duì)象存儲(chǔ)和云硬盤是兩種不同的云存儲(chǔ)解決方案。對(duì)象存儲(chǔ)適合處理大規(guī)模非結(jié)構(gòu)化數(shù)據(jù),通過(guò)WebAPI
    的頭像 發(fā)表于 11-01 10:57 ?180次閱讀

    戴爾科技創(chuàng)新推動(dòng)存儲(chǔ)升級(jí),加速數(shù)據(jù)價(jià)值釋放

    自誕生以來(lái),數(shù)據(jù)存儲(chǔ)的成本一直在穩(wěn)步下降。根據(jù)分析機(jī)構(gòu)Our World in Data在《計(jì)算機(jī)內(nèi)存和存儲(chǔ)的歷史價(jià)格》中的研究顯示,過(guò)去二十年,數(shù)據(jù)
    的頭像 發(fā)表于 10-25 14:53 ?302次閱讀

    AI即服務(wù)平臺(tái)的優(yōu)勢(shì)

    AI即服務(wù)平臺(tái)以其降低成本、加速創(chuàng)新、提升效率、增強(qiáng)安全性及促進(jìn)化等多方面的優(yōu)勢(shì),正在深刻改變企業(yè)運(yùn)營(yíng)模式和市場(chǎng)競(jìng)爭(zhēng)格局。
    的頭像 發(fā)表于 10-09 11:09 ?155次閱讀

    深開鴻聯(lián)合深天使發(fā)布國(guó)內(nèi)首個(gè)開源鴻蒙產(chǎn)業(yè)加速營(yíng)

    生態(tài)的創(chuàng)新與發(fā)展,依托資本和產(chǎn)業(yè)的雙重力量,助力初創(chuàng)企業(yè)在開源鴻蒙生態(tài)中實(shí)現(xiàn)快速成長(zhǎng)。國(guó)內(nèi)首個(gè)開源鴻蒙產(chǎn)業(yè)加速營(yíng)發(fā)布發(fā)布會(huì)現(xiàn)場(chǎng),深圳市天使投資引導(dǎo)基金管理有限公司
    的頭像 發(fā)表于 10-01 08:10 ?310次閱讀
    深開鴻聯(lián)合深天使發(fā)布國(guó)內(nèi)首個(gè)<b class='flag-5'>開源</b>鴻蒙產(chǎn)業(yè)<b class='flag-5'>加速</b>營(yíng)

    深開鴻聯(lián)合深天使發(fā)布國(guó)內(nèi)首個(gè)開源鴻蒙產(chǎn)業(yè)加速營(yíng)

    生態(tài)的創(chuàng)新與發(fā)展,依托資本和產(chǎn)業(yè)的雙重力量,助力初創(chuàng)企業(yè)在開源鴻蒙生態(tài)中實(shí)現(xiàn)快速成長(zhǎng)。 國(guó)內(nèi)首個(gè)開源鴻蒙產(chǎn)業(yè)加速營(yíng)發(fā)布 發(fā)布會(huì)現(xiàn)場(chǎng),深圳市天使投資引導(dǎo)基金管理有限公司總經(jīng)理李新建發(fā)表演
    的頭像 發(fā)表于 09-29 15:28 ?299次閱讀
    深開鴻聯(lián)合深天使發(fā)布國(guó)內(nèi)首個(gè)<b class='flag-5'>開源</b>鴻蒙產(chǎn)業(yè)<b class='flag-5'>加速</b>營(yíng)

    基于分布式對(duì)象存儲(chǔ)WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺(tái)

    基于分布式對(duì)象存儲(chǔ)WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺(tái)
    的頭像 發(fā)表于 08-28 09:56 ?359次閱讀
    基于分布式<b class='flag-5'>對(duì)象</b><b class='flag-5'>存儲(chǔ)</b>WDS的信托非結(jié)構(gòu)化<b class='flag-5'>數(shù)據(jù)</b>整合平臺(tái)

    從閃存,到數(shù)字化:極簡(jiǎn)全閃數(shù)據(jù)中心引發(fā)的變革

    全閃,是萬(wàn)千企業(yè)的真實(shí)需求
    的頭像 發(fā)表于 08-09 16:08 ?2354次閱讀
    從閃存<b class='flag-5'>普</b><b class='flag-5'>惠</b>,到數(shù)字化<b class='flag-5'>普</b><b class='flag-5'>惠</b>:極簡(jiǎn)全閃<b class='flag-5'>數(shù)據(jù)</b>中心引發(fā)的變革

    基于DPU的Ceph存儲(chǔ)解決方案

    1. 方案背景和挑戰(zhàn) Ceph是一個(gè)高度可擴(kuò)展、高性能的開源分布式存儲(chǔ)系統(tǒng),設(shè)計(jì)用于提供優(yōu)秀的對(duì)象存儲(chǔ)、塊存儲(chǔ)和文件
    的頭像 發(fā)表于 07-15 13:44 ?1336次閱讀
    基于DPU的Ceph<b class='flag-5'>存儲(chǔ)</b>解決方案

    希捷科技任命楊曉東先生為高級(jí)副總裁,領(lǐng)導(dǎo)中國(guó)區(qū)業(yè)務(wù)

    2024年7月1日——海量數(shù)據(jù)存儲(chǔ)解決方案領(lǐng)先創(chuàng)新希捷科技(NASDAQ: STX)今天宣布任命楊曉東(Robert Yang)先生為高級(jí)副總裁,領(lǐng)導(dǎo)中國(guó)區(qū)業(yè)務(wù)增長(zhǎng)。他將全面負(fù)責(zé)
    的頭像 發(fā)表于 07-01 14:04 ?870次閱讀
    <b class='flag-5'>希捷</b>科技任命楊曉東先生為高級(jí)副總裁,領(lǐng)導(dǎo)中國(guó)區(qū)業(yè)務(wù)

    蘋果公司澄清舊機(jī)型AI功能支持謠言,強(qiáng)調(diào)技術(shù)

    在數(shù)字時(shí)代的浪潮中,人工智能技術(shù)(AI)已經(jīng)深入滲透到我們生活的方方面面。近日,針對(duì)市場(chǎng)上流傳的關(guān)于蘋果舊機(jī)型不支持AI功能的傳聞,蘋果公司官方給予了明確的回應(yīng),明確指出所有兼容最新iOS系統(tǒng)的設(shè)備均能享受AI帶來(lái)的便利,這并非一種營(yíng)銷策略,而是蘋果公司一貫堅(jiān)持的技術(shù)
    的頭像 發(fā)表于 06-21 17:05 ?2264次閱讀

    極空間上線“阿里云對(duì)象存儲(chǔ)OSS掛載”功能

    雖然與阿里云盤關(guān)聯(lián)密切,但值得注意的是,阿里云對(duì)象存儲(chǔ) OSS 實(shí)質(zhì)上是以對(duì)象形式存儲(chǔ)于 OSS 存儲(chǔ)空間內(nèi)的內(nèi)容。用戶若想使用 OSS,首
    的頭像 發(fā)表于 04-03 11:20 ?699次閱讀

    5G智慧電網(wǎng)解決方案榮獲GSMA GLOMO“最佳專用網(wǎng)絡(luò)解決方案”

    在今年的MWC24巴塞羅那大會(huì)上,一個(gè)由國(guó)家電網(wǎng)、中國(guó)聯(lián)通、華為和鼎橋四方聯(lián)合打造的5G智慧電網(wǎng)解決方案,榮獲了GSMA GLOMO“最佳專用網(wǎng)絡(luò)解決方案獎(jiǎng)”。這一榮譽(yù)不僅標(biāo)志著5G智慧電網(wǎng)已步入大規(guī)模部署階段,更意味著5G與電力的融合
    的頭像 發(fā)表于 03-01 10:10 ?494次閱讀

    率先采用希捷銀河Exos X24,百度聯(lián)手希捷全面駕馭數(shù)據(jù)力量

    在現(xiàn)今數(shù)據(jù)激增的時(shí)代,存儲(chǔ)技術(shù)已成為了行業(yè)關(guān)注的焦點(diǎn)。作為數(shù)據(jù)存儲(chǔ)領(lǐng)域的領(lǐng)軍企業(yè),希捷科技始終站在技術(shù)前沿,致力于為全球用戶提供高效、可靠的
    的頭像 發(fā)表于 02-26 15:16 ?437次閱讀

    屢獲佳績(jī)!百望云榮膺“2023年度數(shù)字金融優(yōu)秀解決方案”

    近日,2024年中國(guó)國(guó)際服務(wù)貿(mào)易交易會(huì)系列活動(dòng)——第七屆中國(guó)金融科技創(chuàng)新大會(huì)在北京開幕。本次大會(huì)發(fā)布了“科創(chuàng)中國(guó)”金融科技創(chuàng)新大賽創(chuàng)新成果,百望云“創(chuàng)新供應(yīng)鏈
    的頭像 發(fā)表于 01-25 11:45 ?346次閱讀
    屢獲佳績(jī)!百望云榮膺“2023年度數(shù)字<b class='flag-5'>普</b><b class='flag-5'>惠</b>金融優(yōu)秀解決方案”