0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

EC改進方案選型:容災方案在性能和可靠性方面如何做驗證

Ceph對象存儲方案 ? 來源:Ceph對象存儲方案 ? 作者:Ceph對象存儲方案 ? 2021-01-06 17:27 ? 次閱讀

EC改進方案選型

接上篇,介紹一下整個容災方案在性能和可靠性方面如何做驗證。

3個機柜,每個機柜15臺機器,總共45臺,需要在RBD場景下,找到成本、性能、數據可靠性的三者平衡點。

c7301826-4ff6-11eb-8b86-12bb97331649.jpg

跨機柜容災方案1

c79cfb12-4ff6-11eb-8b86-12bb97331649.jpg

支持2個機柜級別的容災,跨3個機柜單個分組共9個節(jié)點,共5個分組,對應的理論收益情況如下

名稱 K M D 3副本得盤率 EC得盤率 硬件成本節(jié)約比率 磁盤數據遷移量(ISA) 磁盤數據遷移量(CLAY) 數據恢復負載降低比率
3+2 3 2 4 33.33333333 60 180 3 2 33.33333333

o4YBAF_1gsKARJG0AAAqUIurg1U783.jpg


對應的crush rule如下

o4YBAF_1guyAACb2AAA9zwM_7SE979.jpg

單機柜容災方案2

c82775c6-4ff6-11eb-8b86-12bb97331649.jpg

支持1個機柜級別的容災,單個分組共5個節(jié)點,共9個分組,對應的理論收益情況如下

名稱 K M D 3副本得盤率 EC得盤率 硬件成本節(jié)約比率 磁盤數據遷移量(ISA) 磁盤數據遷移量(CLAY) 數據恢復負載降低比率
4+3 4 3 6 33.33333333 57.14285714 171.4285714 4 2 50
5+3 5 3 7 33.33333333 62.5 187.5 5 2.333333333 53.33333333
6+3 6 3 8 33.33333333 66.66666667 200 6 2.666666667 55.55555556

從性能最優(yōu)原則,K+M總和最小則對應的理論性能最優(yōu),所以單機柜容災模型下,4+3成為最優(yōu)方案。

對應的ec配置如下

o4YBAF_1gwKAEo-pAAApeoYi218109.jpg

對應的crush rule如下

o4YBAF_1gxWAU4z4AAA9bNt8K54717.jpg

crush rule的生成與rule的驗證模擬

o4YBAF_1gymAXPN_AABFMkPvAw4057.jpg

容災能力測試場景

性能測試

RBD場景,模擬大、小文件,順序/隨機讀寫,獲取對應的fio性能基準數據,對比3副本與EC的性能差距。
3副本 vs CLAY_3+2 vs CLAY_4+3

場景名稱 iops 帶寬 90th延時 99th延時 備注
3副本-4M順序讀
3+2-4M順序讀
4+3-4M順序讀
3副本-4M順序寫
3+2-4M順序寫
4+3-4M順序寫
3副本-4k隨機寫
3+2-4k隨機寫
4+3-4k隨機寫
3副本-4k隨機讀
3+2-4k隨機讀
4+3-4k隨機讀

故障恢復效率

前置條件:集群提前寫入容量60%,模擬已有數據場景
目標:對比ISA和CLAY在K+M相同的情況下,RBD場景下持續(xù)讀寫數據,模擬單塊OSD、單個OSD節(jié)點故障、多個OSD節(jié)點故障(可選),數據遷移所需的時長,同時記錄對應的CPU、內存、網卡負載消耗情況,以及性能波動情況。

容災能力

前置條件:集群提前寫入容量60%,模擬已有數據場景
目標:RBD場景下持續(xù)讀寫數據,模擬最小故障域、單機柜、雙機柜故障,記錄對應的性能波動情況,考察在極端情況下整個集群的服務可用性和數據可靠性。

跨機柜容災方案1

c87ec0d8-4ff6-11eb-8b86-12bb97331649.jpg

單機柜容災方案2

c8b68284-4ff6-11eb-8b86-12bb97331649.jpg

責任編輯:xj

原文標題:Ceph最新的EC-CLAY插件調研-下

文章出處:【微信公眾號:Ceph對象存儲方案】歡迎添加關注!文章轉載請注明出處。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機柜
    +關注

    關注

    0

    文章

    47

    瀏覽量

    10468
  • 容災實現
    +關注

    關注

    0

    文章

    2

    瀏覽量

    6779
  • Ceph
    +關注

    關注

    1

    文章

    24

    瀏覽量

    9522

原文標題:Ceph最新的EC-CLAY插件調研-下

文章出處:【微信號:cephbook,微信公眾號:Ceph對象存儲方案】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    MDD高壓二極管電力設備中的應用:絕緣與可靠性的平衡

    單向流動的核心器件,高壓二極管不僅要提供穩(wěn)定的整流功能,還必須在絕緣、電氣可靠性、熱穩(wěn)定性等方面達到嚴苛要求。作為一名長期參與電力行業(yè)項目的FAE,我深刻體會到:設計中要取得性能、絕緣和可靠性
    發(fā)表于 06-09 13:55

    提升功率半導體可靠性:推拉力測試機封裝工藝優(yōu)化中的應用

    隨著功率半導體器件新能源、電動汽車、工業(yè)控制等領域的廣泛應用,其可靠性問題日益受到關注。塑料封裝作為功率器件的主要封裝形式,因其非氣密特性,濕熱環(huán)境下容易出現分層失效,嚴重影響器
    的頭像 發(fā)表于 06-05 10:15 ?64次閱讀
    提升功率半導體<b class='flag-5'>可靠性</b>:推拉力測試機<b class='flag-5'>在</b>封裝工藝優(yōu)化中的應用

    概倫電子攜應用驅動的一站式芯片可靠性解決方案亮相ISEDA 2025,賦能設計公司COT平臺

    解決方案》主題演講,向行業(yè)同仁展示概倫電子芯片可靠性設計領域的創(chuàng)新成果。該方案聚焦汽車電子領域,旨在通過前沿EDA技術助力行業(yè)應對高可靠性
    的頭像 發(fā)表于 05-13 10:25 ?388次閱讀
    概倫電子攜應用驅動的一站式芯片<b class='flag-5'>可靠性</b>解決<b class='flag-5'>方案</b>亮相ISEDA 2025,賦能設計公司COT平臺

    提供半導體工藝可靠性測試-WLR晶圓可靠性測試

    和有源區(qū)連接孔電流應力下的失效。 氧化層完整:測試結構檢測氧化層因缺陷或高電場導致的擊穿。 熱載流子注入:評估MOS管和雙極晶體管絕緣層因載流子注入導致的閾值電壓漂移、漏電流增大。 連接可靠性——鍵合
    發(fā)表于 05-07 20:34

    分立器件可靠性:從工業(yè)死機到汽車故障的隱形防線

    本文聚焦分立器件可靠性,指出35%電子設備失效源于選型不當。解析可靠性三大核心指標(標準認證、參數分析、實測驗證)及選型三大黃金法則,強調避
    的頭像 發(fā)表于 04-23 13:16 ?138次閱讀
    分立器件<b class='flag-5'>可靠性</b>:從工業(yè)死機到汽車故障的隱形防線

    MDD超快恢復二極管的耐壓與電流選型:如何確保可靠性

    至關重要的參數,直接影響器件的可靠性和系統(tǒng)性能。合理選型可以避免短路、過熱、過載等問題,提高系統(tǒng)穩(wěn)定性。1.關鍵選型參數解析超快恢復二極管的選型
    的頭像 發(fā)表于 04-09 10:21 ?298次閱讀
    MDD超快恢復二極管的耐壓與電流<b class='flag-5'>選型</b>:如何確保<b class='flag-5'>可靠性</b>?

    芯片可靠性測試:性能的關鍵

    芯片行業(yè),可靠性測試是確保產品性能的關鍵環(huán)節(jié)。金鑒實驗室作為專業(yè)的檢測機構,提供全面的芯片可靠性測試服務,幫助企業(yè)激烈的市場競爭中保持領
    的頭像 發(fā)表于 03-04 11:50 ?399次閱讀
    芯片<b class='flag-5'>可靠性</b>測試:<b class='flag-5'>性能</b>的關鍵

    一文讀懂芯片可靠性試驗項目

    驗證產品性能的重要手段,更是提高產品可靠性和市場競爭力的關鍵環(huán)節(jié)。通過對芯片進行嚴格的可靠性測試,可以提前發(fā)現潛在的故障模式和失效機制,從而為設計優(yōu)化和工藝
    的頭像 發(fā)表于 02-21 14:50 ?562次閱讀
    一文讀懂芯片<b class='flag-5'>可靠性</b>試驗項目

    汽車車燈檢測與可靠性驗證

    汽車車燈檢測的重要汽車車燈是車輛安全系統(tǒng)中不可或缺的關鍵組件,其性能可靠性對行車安全有著至關重要的影響。車燈不僅要為駕駛者提供良好的照明,還要在各種復雜的環(huán)境條件下正常工作,以確保車輛的行駛安全
    的頭像 發(fā)表于 02-17 17:24 ?397次閱讀
    汽車車燈檢測與<b class='flag-5'>可靠性</b><b class='flag-5'>驗證</b>

    三環(huán)電容的高可靠性汽車電子中的應用!

    三環(huán)電容以其高可靠性汽車電子領域中得到了廣泛應用,以下是對其在這一領域應用的詳細分析: 一、三環(huán)電容的高可靠性特點 三環(huán)電容具有多種優(yōu)點,這些優(yōu)點共同構成了其高可靠性的基礎: 精確的
    的頭像 發(fā)表于 02-14 15:53 ?387次閱讀
    三環(huán)電容的高<b class='flag-5'>可靠性</b>,<b class='flag-5'>在</b>汽車電子中的應用!

    EC-Master 支持 Xenomai 4 了!實時可靠性再升級

    大家好!今天我們有一個激動人心的消息要分享:EC-Master(實時工業(yè)控制系統(tǒng))正式支持Xenomai4!這一重大的技術更新標志著EC-Master實時、
    的頭像 發(fā)表于 01-16 15:54 ?762次閱讀
    <b class='flag-5'>EC</b>-Master 支持 Xenomai 4 了!實時<b class='flag-5'>性</b>與<b class='flag-5'>可靠性</b>再升級

    如何測試光耦的性能可靠性

    光耦作為電氣隔離的關鍵組件,其性能可靠性直接影響到整個系統(tǒng)的穩(wěn)定性和安全。因此,對光耦進行嚴格的性能測試和可靠性評估是必不可少的。 光耦
    的頭像 發(fā)表于 01-14 16:13 ?1107次閱讀

    PCB高可靠性化要求與發(fā)展——PCB高可靠性的影響因素(上)

    可靠性提出了更為嚴格的要求,特別是焊接點的結合力、熱應力管理以及焊接點數量的增加等方面。本文將探討影響PCB可靠性的關鍵因素,并分析當前和未來提高PCB
    的頭像 發(fā)表于 10-11 11:20 ?967次閱讀
    PCB高<b class='flag-5'>可靠性</b>化要求與發(fā)展——PCB高<b class='flag-5'>可靠性</b>的影響因素(上)

    基于可靠性設計感知的EDA解決方案

    產品可靠性,包括制造和運營方面,正在成為芯片-封裝-系統(tǒng)迭代設計周期中設計的關鍵方面,尤其是那些有望承受更長使用壽命和可能的惡劣操作環(huán)境的產品,例如汽車電子系統(tǒng)、高性能計算 (HPC)
    的頭像 發(fā)表于 07-15 09:56 ?700次閱讀
    基于<b class='flag-5'>可靠性</b>設計感知的EDA解決<b class='flag-5'>方案</b>

    汽車功能安全與可靠性的關系

    當前,隨著汽車領域的飛速發(fā)展,汽車也被重新定義。汽車電子電氣系統(tǒng)設計時,離不開對功能安全和可靠性設計的考慮。正確理解兩者之間的關系,有助于更好地分析問題和解決問題。什么是汽車可靠性汽車可靠性
    的頭像 發(fā)表于 07-13 08:28 ?3487次閱讀
    汽車功能安全與<b class='flag-5'>可靠性</b>的關系

    電子發(fā)燒友

    中國電子工程師最喜歡的網站

    • 2931785位工程師會員交流學習
    • 獲取您個性化的科技前沿技術信息
    • 參加活動獲取豐厚的禮品