0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

汽車玩家 ? 來源:簡書 ? 作者:Java微服務(wù) ? 2020-05-03 14:36 ? 次閱讀

前言

在分布式系統(tǒng)中,緩存和數(shù)據(jù)庫同時(shí)存在時(shí),如果有寫操作的時(shí)候,先操作數(shù)據(jù)庫還是先操作緩存呢?先思考一下,可能會存在哪些問題,再往下看。下面我分幾種方案闡述。

緩存維護(hù)方案一

假設(shè)有一寫(線程A)一讀(線程B)操作,先操作緩存,在操作數(shù)據(jù)庫。,如下流程圖所示:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個(gè)寫操作,第一步del cache

2)線程A第二步寫入新數(shù)據(jù)到DB

3)線程B發(fā)起一個(gè)讀操作,cache miss,

4)線程B從DB獲取最新數(shù)據(jù)

5)請求B同時(shí)set cache

這樣看,沒啥問題。我們再看第二個(gè)流程圖,如下:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個(gè)寫操作,第一步del cache

2)此時(shí)線程B發(fā)起一個(gè)讀操作,cache miss

3)線程B繼續(xù)讀DB,讀出來一個(gè)老數(shù)據(jù)

4)然后老數(shù)據(jù)入cache

5)線程A寫入了最新的數(shù)據(jù)

OK,醬紫,就有問題了吧,老數(shù)據(jù)入到緩存了,每次讀都是老數(shù)據(jù)啦,緩存與數(shù)據(jù)與數(shù)據(jù)庫數(shù)據(jù)不一致。

緩存維護(hù)方案二

雙寫操作,先操作緩存,在操作數(shù)據(jù)庫。

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個(gè)寫操作,第一步set cache

2)線程A第二步寫入新數(shù)據(jù)到DB

3)線程B發(fā)起一個(gè)寫操作,set cache,

4)線程B第二步寫入新數(shù)據(jù)到DB

這樣看,也沒啥問題。,但是有時(shí)候可能事與愿違,我們再看第二個(gè)流程圖,如下:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個(gè)寫操作,第一步set cache

2)線程B發(fā)起一個(gè)寫操作,第一步setcache

3)線程B寫入數(shù)據(jù)庫到DB

4)線程A寫入數(shù)據(jù)庫到DB

執(zhí)行完后,緩存保存的是B操作后的數(shù)據(jù),數(shù)據(jù)庫是A操作后的數(shù)據(jù),緩存和數(shù)據(jù)庫數(shù)據(jù)不一致。

緩存維護(hù)方案三

一寫(線程A)一讀(線程B)操作,先操作數(shù)據(jù)庫,再操作緩存。

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個(gè)寫操作,第一步write DB

2)線程A第二步del cache

3)線程B發(fā)起一個(gè)讀操作,cache miss

4)線程B從DB獲取最新數(shù)據(jù)

5)線程B同時(shí)set cache

這種方案沒有明顯的并發(fā)問題,但是有可能步驟二刪除緩存失敗,雖然概率比較小,優(yōu)于方案一和方案二,平時(shí)工作中也是使用方案三。

綜上對比,我們一般采用方案三,但是有沒有完美全解決方案三的弊端的方法呢?

緩存維護(hù)方案四

這個(gè)是方案三的改進(jìn)方案,都是先操作數(shù)據(jù)庫再操作緩存,我們來看一下流程圖:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

通過數(shù)據(jù)庫的binlog來異步淘汰key,以mysql為例 可以使用阿里的canal將binlog日志采集發(fā)送到MQ隊(duì)列里面,然后通過ACK機(jī)制 確認(rèn)處理這條更新消息,刪除緩存,保證數(shù)據(jù)緩存一致性。

但是呢還有個(gè)問題,如果是主從數(shù)據(jù)庫呢?

緩存維護(hù)方案五

主從DB問題:因?yàn)橹鲝腄B同步存在同時(shí)延時(shí)時(shí)間如果刪除緩存之后,數(shù)據(jù)同步到備庫之前已經(jīng)有請求過來時(shí),會從備庫中讀到臟數(shù)據(jù),如何解決呢?解決方案如下流程圖:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

緩存維護(hù)總結(jié)

綜上所述,在分布式系統(tǒng)中,緩存和數(shù)據(jù)庫同時(shí)存在時(shí),如果有寫操作的時(shí)候,先操作數(shù)據(jù)庫,再操作緩存。如下:

(1)讀取緩存中是否有相關(guān)數(shù)據(jù)

(2)如果緩存中有相關(guān)數(shù)據(jù)value,則返回

(3)如果緩存中沒有相關(guān)數(shù)據(jù),則從數(shù)據(jù)庫讀取相關(guān)數(shù)據(jù)放入緩存中key->value,再返回

(4)如果有更新數(shù)據(jù),則先更新數(shù)據(jù),再刪除緩存

(5)為了保證第四步刪除緩存成功,使用binlog異步刪除

(6)如果是主從數(shù)據(jù)庫,binglog取自于從庫

(7)如果是一主多從,每個(gè)從庫都要采集binlog,然后消費(fèi)端收到最后一臺binlog數(shù)據(jù)才刪除緩存

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
收藏 人收藏

    評論

    相關(guān)推薦

    分布式云化數(shù)據(jù)庫有哪些類型

    分布式云化數(shù)據(jù)庫有哪些類型?分布式云化數(shù)據(jù)庫主要類型包括:關(guān)系型分布式數(shù)據(jù)庫、非關(guān)系型分布式數(shù)據(jù)庫
    的頭像 發(fā)表于 01-15 09:43 ?184次閱讀

    基于ptp的分布式系統(tǒng)設(shè)計(jì)

    在現(xiàn)代分布式系統(tǒng),精確的時(shí)間同步對于確保數(shù)據(jù)一致性、系統(tǒng)穩(wěn)定性和性能至關(guān)重要。PTP(Precision Time Protocol)是一
    的頭像 發(fā)表于 12-29 10:09 ?250次閱讀

    HarmonyOS Next 應(yīng)用元服務(wù)開發(fā)-分布式數(shù)據(jù)對象遷移數(shù)據(jù)文件資產(chǎn)遷移

    提供了async版本供該場景使用。 當(dāng)前,wantParams“sessionId”字段在遷移流程中被系統(tǒng)占用,建議開發(fā)者在wantParams定義其他key值存儲該分布式
    發(fā)表于 12-24 10:11

    HarmonyOS Next 應(yīng)用元服務(wù)開發(fā)-分布式數(shù)據(jù)對象遷移數(shù)據(jù)權(quán)限與基礎(chǔ)數(shù)據(jù)

    提供了async版本供該場景使用。 當(dāng)前,wantParams“sessionId”字段在遷移流程中被系統(tǒng)占用,建議開發(fā)者在wantParams定義其他key值存儲該分布式
    發(fā)表于 12-24 09:40

    PingCAP推出TiDB開源分布式數(shù)據(jù)庫

    的性能表現(xiàn)。我們將繼續(xù)堅(jiān)持開源的創(chuàng)新理念,將TiDB打造成一個(gè)領(lǐng)先的數(shù)據(jù)庫產(chǎn)品?!?部署新一代分布式數(shù)據(jù)庫已經(jīng)成為用戶釋放數(shù)據(jù)價(jià)值、推動數(shù)字化轉(zhuǎn)型的重要方式,但隨著數(shù)據(jù)的快速增長以及上
    的頭像 發(fā)表于 11-24 11:26 ?670次閱讀
    PingCAP推出TiDB開源<b class='flag-5'>分布式數(shù)據(jù)庫</b>

    一文講清什么是分布式云化數(shù)據(jù)庫

    分布式云化數(shù)據(jù)庫是一種先進(jìn)的數(shù)據(jù)管理系統(tǒng),它將傳統(tǒng)的數(shù)據(jù)庫技術(shù)與分布式計(jì)算、云計(jì)算和大
    的頭像 發(fā)表于 10-14 10:06 ?312次閱讀

    分布式云化數(shù)據(jù)庫的優(yōu)缺點(diǎn)分析

    分布式云化數(shù)據(jù)庫的優(yōu)點(diǎn)主要體現(xiàn)在高可用性和容錯性、可擴(kuò)展性、體系結(jié)構(gòu)、數(shù)據(jù)一致性、成本、升級迭代等方面。同時(shí)也存在一些缺點(diǎn),如通信開銷較大、數(shù)據(jù)的存取結(jié)構(gòu)復(fù)雜、
    的頭像 發(fā)表于 09-14 09:42 ?334次閱讀

    軟件系統(tǒng)數(shù)據(jù)庫的分庫分表設(shè)計(jì)

    分布式集群,實(shí)現(xiàn)分庫分表功能,解決數(shù)據(jù)庫中海量數(shù)據(jù)存儲和查詢性能的問題。MyCat 還是一個(gè)數(shù)據(jù)庫的集群中間件,主要實(shí)現(xiàn) RDBMS 數(shù)據(jù)庫
    的頭像 發(fā)表于 08-22 11:39 ?417次閱讀
    軟件<b class='flag-5'>系統(tǒng)</b><b class='flag-5'>數(shù)據(jù)庫</b>的分庫分表設(shè)計(jì)

    基于分布式存儲WDS的金融信創(chuàng)云承載數(shù)據(jù)庫類關(guān)鍵應(yīng)用

    基于分布式存儲WDS的金融信創(chuàng)云承載數(shù)據(jù)庫類關(guān)鍵應(yīng)用
    的頭像 發(fā)表于 08-16 09:42 ?389次閱讀
    基于<b class='flag-5'>分布式</b>存儲WDS的金融信創(chuàng)云承載<b class='flag-5'>數(shù)據(jù)庫</b>類關(guān)鍵應(yīng)用

    Memcached介紹和詳解

    ,Memcached可以顯著減輕后端數(shù)據(jù)庫和Web服務(wù)器的負(fù)載。 Memcached作為一個(gè)高性能的內(nèi)存緩存系統(tǒng),通過緩存經(jīng)常訪問的數(shù)據(jù)來提
    發(fā)表于 07-17 15:58

    探討篇(四):分布式數(shù)據(jù)訪問解決方案

    背景 如果數(shù)據(jù)在同一個(gè)服務(wù)的同一個(gè)數(shù)據(jù)庫,通過SQL即可查詢相對比較簡單,但當(dāng)數(shù)據(jù)分布到不同服務(wù)不同的數(shù)據(jù)庫
    的頭像 發(fā)表于 07-12 15:19 ?482次閱讀
    探討篇(四):<b class='flag-5'>分布式</b><b class='flag-5'>數(shù)據(jù)</b>訪問解決方案

    鴻蒙開發(fā)接口數(shù)據(jù)管理:【@ohos.data.distributedData (分布式數(shù)據(jù)管理)】

    分布式數(shù)據(jù)管理為應(yīng)用程序提供不同設(shè)備間數(shù)據(jù)庫分布式協(xié)同能力。通過調(diào)用分布式數(shù)據(jù)各個(gè)接口,應(yīng)用程
    的頭像 發(fā)表于 06-07 09:30 ?1185次閱讀
    鴻蒙開發(fā)接口<b class='flag-5'>數(shù)據(jù)</b>管理:【@ohos.data.distributedData (<b class='flag-5'>分布式</b><b class='flag-5'>數(shù)據(jù)</b>管理)】

    HarmonyOS開發(fā)實(shí)例:【分布式手寫板】

    使用設(shè)備管理及分布式鍵值數(shù)據(jù)庫能力,實(shí)現(xiàn)多設(shè)備之間手寫板應(yīng)用拉起及同步書寫內(nèi)容的功能。
    的頭像 發(fā)表于 04-17 21:45 ?637次閱讀
    HarmonyOS開發(fā)實(shí)例:【<b class='flag-5'>分布式</b>手寫板】

    鴻蒙HarmonyOS開發(fā)實(shí)例:【分布式關(guān)系型數(shù)據(jù)庫

    使用[@ohos.data.relationalStore]接口和[@ohos.distributedDeviceManager]?接口展示了在eTS中分布式關(guān)系型數(shù)據(jù)庫的使用,在增、刪、改、查的基本操作外,還包括
    的頭像 發(fā)表于 04-11 09:52 ?1137次閱讀
    鴻蒙HarmonyOS開發(fā)實(shí)例:【<b class='flag-5'>分布式</b>關(guān)系型<b class='flag-5'>數(shù)據(jù)庫</b>】

    ?通過Modbus讀寫數(shù)據(jù)庫數(shù)據(jù)

    本文是將數(shù)據(jù)庫數(shù)據(jù)轉(zhuǎn)為Modbus服務(wù)端/從站,實(shí)現(xiàn)數(shù)據(jù)庫內(nèi)的數(shù)據(jù)也可以走M(jìn)odbus協(xié)議通過網(wǎng)口或串口讀寫的案例,下圖是通過智能網(wǎng)關(guān)的參數(shù)軟件(在附件
    發(fā)表于 03-14 13:44