0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

【分布式存儲(chǔ)數(shù)據(jù)恢復(fù)】hbase和hive數(shù)據(jù)庫底層文件誤刪的恢復(fù)案例

Frombyte ? 來源:Frombyte ? 作者:Frombyte ? 2022-12-16 10:40 ? 次閱讀

分布式存儲(chǔ)數(shù)據(jù)恢復(fù)環(huán)境:

16臺(tái)物理服務(wù)器,每臺(tái)物理服務(wù)器上有數(shù)臺(tái)虛擬機(jī);

虛擬機(jī)上配置分布式,上層部署hbase數(shù)據(jù)庫和hive數(shù)據(jù)庫。

分布式存儲(chǔ)故障&分析:

誤刪除數(shù)據(jù)庫底層文件,數(shù)據(jù)庫不能使用。需要恢復(fù)hbase和hive數(shù)據(jù)庫。

通過現(xiàn)場(chǎng)對(duì)用戶環(huán)境的檢測(cè),數(shù)據(jù)恢復(fù)工程師發(fā)現(xiàn)虛擬機(jī)還可以正常啟動(dòng),虛擬機(jī)上的數(shù)據(jù)庫塊文件丟失。塊文件丟失之后沒有新的數(shù)據(jù)寫入操作,底層的數(shù)據(jù)損壞可能性比較小。

分布式存儲(chǔ)數(shù)據(jù)恢復(fù)過程:

1、備份。

對(duì)物理服務(wù)器底層做備份。通過網(wǎng)絡(luò)直接備份虛擬機(jī)底層磁盤文件。

準(zhǔn)備一臺(tái)服務(wù)器,以只讀方式掛載所有服務(wù)器硬盤,使用磁盤備份工具進(jìn)行扇區(qū)級(jí)別的備份。

2、分析塊文件結(jié)構(gòu)。

分析每個(gè)虛擬機(jī)磁盤的塊文件&文件底層的聚合方式&每個(gè)磁盤中數(shù)據(jù)的分布情況。

3、分析Block文件key。

定位&提取并解析數(shù)據(jù)庫文件中key信息,整合數(shù)據(jù)庫文件key信息。

4、拼接Block文件。

根據(jù)Block文件的key信息提取文件片段,拼接提取出來的Block文件片段并校驗(yàn)拼接出來的Block文件的正確性。

5、導(dǎo)入Block文件。

校驗(yàn)提取出的Block文件完整性及正確性并把提取出來的Block文件導(dǎo)入到hbase和hive數(shù)據(jù)庫中。

6、驗(yàn)證數(shù)據(jù)。

在北亞數(shù)據(jù)恢復(fù)工程師的協(xié)助下,由用戶對(duì)恢復(fù)出來的數(shù)據(jù)進(jìn)行驗(yàn)證。如果發(fā)現(xiàn)問題,重新檢驗(yàn)上述所有過程。

北亞數(shù)據(jù)恢復(fù)服務(wù):

1、整個(gè)過程不會(huì)對(duì)原盤進(jìn)行任何寫入操作。

2、盡可能保證操作可逆,確保人力可控范圍內(nèi)操作可回溯。

3、提供后期數(shù)據(jù)保管和服務(wù)跟蹤。

4、所有操作都是在有備份的情況下進(jìn)行,若不成功不影響其他方案。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    Sybase數(shù)據(jù)恢復(fù)—Sybase數(shù)據(jù)庫無法啟動(dòng)怎么恢復(fù)數(shù)據(jù)

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)工程師經(jīng)過檢測(cè),發(fā)現(xiàn)Sybase數(shù)據(jù)庫出現(xiàn)故障的原因是:異常斷電造成Sybase數(shù)據(jù)庫無法回寫正常
    的頭像 發(fā)表于 11-30 16:45 ?138次閱讀
    Sybase<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—Sybase<b class='flag-5'>數(shù)據(jù)庫</b>無法啟動(dòng)怎么<b class='flag-5'>恢復(fù)數(shù)據(jù)</b>?

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—通過拼接數(shù)據(jù)庫碎片恢復(fù)SQLserver數(shù)據(jù)庫

    一個(gè)運(yùn)行在存儲(chǔ)上的SQLServer數(shù)據(jù)庫,有1000多個(gè)文件,大小幾十TB。數(shù)據(jù)庫每10天生成一個(gè)NDF文件,每個(gè)NDF幾百GB大小。
    的頭像 發(fā)表于 10-31 13:21 ?254次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—通過拼接<b class='flag-5'>數(shù)據(jù)庫</b>碎片<b class='flag-5'>恢復(fù)</b>SQLserver<b class='flag-5'>數(shù)據(jù)庫</b>

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—Oracle ASM實(shí)例無法掛載的數(shù)據(jù)恢復(fù)案例

    方案: 數(shù)據(jù)庫數(shù)據(jù)恢復(fù)工程師對(duì)組成ASM磁盤組的磁盤進(jìn)行分析。對(duì)ASM元數(shù)據(jù)進(jìn)行分析發(fā)現(xiàn)ASM存儲(chǔ)數(shù)
    的頭像 發(fā)表于 10-28 11:26 ?168次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—Oracle ASM實(shí)例無法掛載的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    oracle數(shù)據(jù)恢復(fù)—Oracle數(shù)據(jù)庫打開報(bào)錯(cuò)的數(shù)據(jù)恢復(fù)案例

    和data pump工具無法使用,查詢告警日志并分析報(bào)錯(cuò),確認(rèn)發(fā)生上述錯(cuò)誤的原因就是sysaux01.dbf文件損壞。由于該文件損壞,從數(shù)據(jù)庫層面無法修復(fù)數(shù)據(jù)庫。由于system和用戶
    的頭像 發(fā)表于 10-17 13:20 ?242次閱讀
    oracle<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—Oracle<b class='flag-5'>數(shù)據(jù)庫</b>打開報(bào)錯(cuò)的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    Oracle數(shù)據(jù)恢復(fù)—異常斷電后Oracle數(shù)據(jù)庫報(bào)錯(cuò)的數(shù)據(jù)恢復(fù)案例

    Oracle數(shù)據(jù)庫的在線文件,需要恢復(fù)zxfg用戶的數(shù)據(jù)。 Oracle數(shù)據(jù)庫恢復(fù)方案:
    的頭像 發(fā)表于 09-30 13:31 ?319次閱讀
    Oracle<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—異常斷電后Oracle<b class='flag-5'>數(shù)據(jù)庫</b>啟<b class='flag-5'>庫</b>報(bào)錯(cuò)的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—Oracle數(shù)據(jù)庫文件system01.dbf損壞的數(shù)據(jù)恢復(fù)案例

    打開oracle數(shù)據(jù)庫報(bào)錯(cuò)“system01.dbf需要更多的恢復(fù)來保持一致性,數(shù)據(jù)庫無法打開”。
    的頭像 發(fā)表于 09-21 14:25 ?390次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—Oracle<b class='flag-5'>數(shù)據(jù)庫文件</b>system01.dbf損壞的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SQL Server數(shù)據(jù)庫出現(xiàn)823錯(cuò)誤的數(shù)據(jù)恢復(fù)案例

    SQL Server數(shù)據(jù)庫故障: SQL Server附加數(shù)據(jù)庫出現(xiàn)錯(cuò)誤823,附加數(shù)據(jù)庫失敗。數(shù)據(jù)庫沒有備份,無法通過備份恢復(fù)數(shù)據(jù)庫。
    的頭像 發(fā)表于 09-20 11:46 ?365次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—SQL Server<b class='flag-5'>數(shù)據(jù)庫</b>出現(xiàn)823錯(cuò)誤的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    基于分布式存儲(chǔ)WDS的金融信創(chuàng)云承載數(shù)據(jù)庫類關(guān)鍵應(yīng)用

    基于分布式存儲(chǔ)WDS的金融信創(chuàng)云承載數(shù)據(jù)庫類關(guān)鍵應(yīng)用
    的頭像 發(fā)表于 08-16 09:42 ?285次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲(chǔ)</b>WDS的金融信創(chuàng)云承載<b class='flag-5'>數(shù)據(jù)庫</b>類關(guān)鍵應(yīng)用

    NetApp數(shù)據(jù)恢復(fù)—NetApp存儲(chǔ)誤刪除的數(shù)據(jù)恢復(fù)案例

    某公司一臺(tái)NetApp存儲(chǔ),該存儲(chǔ)中有24塊磁盤。 工作人員誤刪除了NetApp存儲(chǔ)中一個(gè)文件夾,文件
    的頭像 發(fā)表于 08-12 13:35 ?282次閱讀
    NetApp<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—NetApp<b class='flag-5'>存儲(chǔ)</b><b class='flag-5'>誤刪</b>除的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SqlServer數(shù)據(jù)庫底層File Record被截?cái)酁?的數(shù)據(jù)恢復(fù)案例

    SQL Server數(shù)據(jù)庫數(shù)據(jù)無法被讀取。 經(jīng)過數(shù)據(jù)庫數(shù)據(jù)恢復(fù)工程師的初步檢測(cè),發(fā)現(xiàn)SQL Server
    的頭像 發(fā)表于 07-26 11:27 ?406次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—SqlServer<b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>底層</b>File Record被截?cái)酁?的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    Oracle數(shù)據(jù)恢復(fù)—Oracle刪除數(shù)據(jù)不用怕!這些數(shù)據(jù)恢復(fù)方法了解一下

    相信有很多oracle數(shù)據(jù)庫用戶都遇到過在操作Oracle數(shù)據(jù)庫時(shí)誤刪除某些重要數(shù)據(jù)的情況,這個(gè)時(shí)候如果數(shù)據(jù)庫沒有備份且
    的頭像 發(fā)表于 07-19 16:40 ?541次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—raid5陣列上層Sql Server數(shù)據(jù)庫數(shù)據(jù)恢復(fù)案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)環(huán)境: 5塊硬盤組建一組RAID5陣列,劃分LUN供windows系統(tǒng)服務(wù)器使用。windows系統(tǒng)服務(wù)器內(nèi)運(yùn)行了Sql Server數(shù)據(jù)庫,
    的頭像 發(fā)表于 05-08 11:43 ?523次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—raid5陣列上層Sql Server<b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—ndf文件大小變?yōu)?KB的數(shù)據(jù)恢復(fù)案例

    存儲(chǔ)設(shè)備損壞導(dǎo)致存儲(chǔ)中SQL Server數(shù)據(jù)庫崩潰。對(duì)數(shù)據(jù)庫文件進(jìn)行恢復(fù)后,用戶發(fā)現(xiàn)有4個(gè)ndf文件
    的頭像 發(fā)表于 05-07 11:19 ?428次閱讀

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—Sql Server數(shù)據(jù)庫文件丟失的數(shù)據(jù)恢復(fù)案例

    。存儲(chǔ)空間LUN劃分了兩個(gè)邏輯分區(qū)。 服務(wù)器故障&初檢: 由于未知原因,Sql Server數(shù)據(jù)庫文件丟失,丟失數(shù)據(jù)涉及到3個(gè),表的數(shù)量有3000左右。
    的頭像 發(fā)表于 04-11 15:38 ?911次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>—Sql Server<b class='flag-5'>數(shù)據(jù)庫文件</b>丟失的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>恢復(fù)</b>案例