面試官:高併發場景下,你們是怎麼保證數據的一致性的?

来源:https://www.cnblogs.com/yidengjiagou/archive/2022/06/13/16371838.html
-Advertisement-
Play Games

面試的時候,總會遇到這麼一個場景。 1. 場景分析 面試官:你們的服務的QPS是多少? 我:我們的服務高峰期訪問量還挺大的,大約是3萬吧。 面試官:這麼大的訪問量,你們的伺服器能撐住嗎?有加緩存嗎? 我:有的,我們使用了Redis做緩存,介面優先查詢緩存,緩存不存在,才訪問資料庫。這樣可以減少資料庫 ...


面試的時候,總會遇到這麼一個場景。

1. 場景分析

面試官:你們的服務的QPS是多少?

我:我們的服務高峰期訪問量還挺大的,大約是3萬吧。

面試官:這麼大的訪問量,你們的伺服器能撐住嗎?有加緩存嗎?

我:有的,我們使用了Redis做緩存,介面優先查詢緩存,緩存不存在,才訪問資料庫。這樣可以減少資料庫訪問壓力,加快查詢效率。

面試官:一份數據存儲在兩個地方,更新數據的時候,你們是怎麼保證數據的一致性的?

看到了吧,好的面試官一般不直接問你數據一致性的解決方案,而是循循善誘,結合具體的使用場景,再問你解決方法。如果你沒做過這方面,沒有線上的實戰經驗,一般很難回答的有條理性、有思考性。

保證數據一致性,一般有這4種方法:

  1. 先更新緩存,再更新資料庫。
  2. 先更新資料庫,再更新緩存。
  3. 先刪除緩存,再更新資料庫。
  4. 先更新資料庫,再刪除緩存。

每種方案都詳細的討論一下:

2. 解決方案

2.1 先更新緩存,再更新資料庫

如果同時來了兩個併發寫請求,執行過程是這樣的:

  1. 寫請求1更新緩存,設置age為1
  2. 寫請求2更新緩存,設置age為2
  3. 寫請求2更新資料庫,設置age為2
  4. 寫請求1更新資料庫,設置age為1

執行結果就是,緩存里age被設置2,資料庫里的age被設置成1,導致數據不一致,此方案不可行。

2.2 先更新資料庫,再更新緩存

如果同時來了兩個併發寫請求,執行過程是這樣的:

  1. 寫請求1更新資料庫,設置age為1
  2. 寫請求2更新資料庫,設置age為2
  3. 寫請求2更新緩存,設置age為2
  4. 寫請求1更新緩存,設置age為1

執行結果就是,資料庫里age被設置2,緩存里的age被設置成1,導致數據不一致,此方案不可行。

2.3 先刪除緩存,再更新資料庫

如果同時來了兩個併發讀寫請求,執行過程是這樣的:

  1. 寫請求刪除了緩存
  2. 讀請求查詢緩存沒數據,然後查詢資料庫,再把數據寫到緩存中
  3. 寫請求更新資料庫

執行結果是,緩存中是舊數據,而資料庫里是新數據,導致數據不一致,此方案不可行。

2.4 先更新資料庫,再刪除緩存

這種方案,在併發寫的時候,不會出問題。因為都是先更新資料庫再刪除緩存,不會出現不一致的情況。

但是在併發讀寫的時候,還是有可能出現數據不一致。

  1. 讀請求查詢緩存沒數據,然後查詢資料庫
  2. 寫請求更新資料庫,刪除緩存
  3. 讀請求回寫緩存

執行結果是,緩存中是舊數據,而資料庫里是新數據,導致數據不一致。

其實這種情況出現的概率很低,寫緩存比寫資料庫快出幾個量級,讀寫緩存都是記憶體操作,速度非常快。

遇到了這種極端場景,我們也需要做一下兜底方案,緩存都要設置過期時間。這種方案屬於數據的弱一致性和最終一致性,而不是強一致性。

3. 總結與思考

有讀者可能會好奇,為什麼不在更新緩存和資料庫方法上加上事務註解,實現強一致性,這麼哪種方案都不會有問題。

是的,當我們的服務只在一臺機器上,加本地事務是可行的。但是工作中,我們會把一個服務部署到幾十臺、上百台機器上,有時候為了應對更極端的查詢請求,又在Redis緩存加一層本地緩存,這時候我們再用本地事務是不起作用的。

一份數據在多台機器上,存在多個副本,為了實現強一致性,我們也可以使用分散式事務。這樣一來更新緩存操作將會變得非常複雜,得不償失。

但是在另外的一些場景,比如更新訂單狀態、更新用戶資產,這種場景,我們無論付出多大代價也要實現數據的強一致性,具體實現方案一般有以下幾種:

  1. 二階段提交
  2. TCC
  3. 本地消息表
  4. MQ事務消息
  5. 分散式事務中間件

下篇文章咱們再一起詳細的分析這幾種方案優缺點。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 聲明 這個程式只是用來演示查看後臺和對接後臺的原理和過程,供代碼學習參考,請勿濫用! 起因 因為上海疫情,我們所有的活動都得線上上完成,作為一個新時代好學生,我該做點什麼了。 我的學校選擇的上課平臺是希沃的立知課堂,教師端是希沃白板電腦客戶端,學生端是網頁端、微信小程式端、移動設備軟體端。 觀察後臺 ...
  • 日常開發系統中通常需要對接多個系統,需要用到適配器模式。 例如:支付方式就涉及多個系統對接。 國際慣例,先引入概念。 適配器模式: 提到適配器自然就能想到手機用的電源適配器。 他的作用就是將220V交流電轉換成手機使用的5V直流電。 適配器作用:將一個介面轉換成另外一個介面,已符合客戶的期望。 軟體 ...
  • 目錄 一.簡介 二.效果演示 三.源碼下載 四.猜你喜歡 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 基礎 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 轉場 零基礎 O ...
  • 算術運算符 +:正值運算符 / 加法運算符 int x = 4 + 22; -:負值運算符 / 減法運算符 int y = 61 - 23; *:乘法運算符 int num = 5; printf("%i\n", num * num); // 輸出 25 /:除法運算符 C 語言裡面的 整數除法 是 ...
  • Java 零錢通項目 項目要求:使用 Java 開發 零錢通項目 , 可以完成收益入賬,消費,查看明細,退出系統等功能。 1. 面向過程 1)首先是這樣一個菜單界面 由於不管選擇什麼,都需要至少執行一次,所以考慮do...while迴圈結構。 boolean loop = true; do { Sy ...
  • 前言 學習eureka的過程中,配置了本地多節點,發現節點間數據不同步,自己找源碼發現eureka.client.service-url.default-zone 配置有誤,default-zone應該為defaultZone,該配置配置在EurekaClientConfigBean中,如果未配置d ...
  • 目錄 一.簡介 二.效果演示 三.源碼下載 四.猜你喜歡 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 基礎 零基礎 OpenGL (ES) 學習路線推薦 : OpenGL (ES) 學習目錄 >> OpenGL ES 轉場 零基礎 O ...
  • 今天給大家分享 3 個比較冷門的知識 第一個:神奇的字典鍵 Python學習交流Q群:906715085#### some_dict = {} some_dict[5.5] = "Ruby" some_dict[5.0] = "JavaScript" some_dict[5] = "Python" ...
一周排行
    -Advertisement-
    Play Games
  • 基於.NET Framework 4.8 開發的深度學習模型部署測試平臺,提供了YOLO框架的主流系列模型,包括YOLOv8~v9,以及其系列下的Det、Seg、Pose、Obb、Cls等應用場景,同時支持圖像與視頻檢測。模型部署引擎使用的是OpenVINO™、TensorRT、ONNX runti... ...
  • 十年沉澱,重啟開發之路 十年前,我沉浸在開發的海洋中,每日與代碼為伍,與演算法共舞。那時的我,滿懷激情,對技術的追求近乎狂熱。然而,隨著歲月的流逝,生活的忙碌逐漸占據了我的大部分時間,讓我無暇顧及技術的沉澱與積累。 十年間,我經歷了職業生涯的起伏和變遷。從初出茅廬的菜鳥到逐漸嶄露頭角的開發者,我見證了 ...
  • C# 是一種簡單、現代、面向對象和類型安全的編程語言。.NET 是由 Microsoft 創建的開發平臺,平臺包含了語言規範、工具、運行,支持開發各種應用,如Web、移動、桌面等。.NET框架有多個實現,如.NET Framework、.NET Core(及後續的.NET 5+版本),以及社區版本M... ...
  • 前言 本文介紹瞭如何使用三菱提供的MX Component插件實現對三菱PLC軟元件數據的讀寫,記錄了使用電腦模擬,模擬PLC,直至完成測試的詳細流程,並重點介紹了在這個過程中的易錯點,供參考。 用到的軟體: 1. PLC開發編程環境GX Works2,GX Works2下載鏈接 https:// ...
  • 前言 整理這個官方翻譯的系列,原因是網上大部分的 tomcat 版本比較舊,此版本為 v11 最新的版本。 開源項目 從零手寫實現 tomcat minicat 別稱【嗅虎】心有猛虎,輕嗅薔薇。 系列文章 web server apache tomcat11-01-官方文檔入門介紹 web serv ...
  • 1、jQuery介紹 jQuery是什麼 jQuery是一個快速、簡潔的JavaScript框架,是繼Prototype之後又一個優秀的JavaScript代碼庫(或JavaScript框架)。jQuery設計的宗旨是“write Less,Do More”,即倡導寫更少的代碼,做更多的事情。它封裝 ...
  • 前言 之前的文章把js引擎(aardio封裝庫) 微軟開源的js引擎(ChakraCore))寫好了,這篇文章整點js代碼來測一下bug。測試網站:https://fanyi.youdao.com/index.html#/ 逆向思路 逆向思路可以看有道翻譯js逆向(MD5加密,AES加密)附完整源碼 ...
  • 引言 現代的操作系統(Windows,Linux,Mac OS)等都可以同時打開多個軟體(任務),這些軟體在我們的感知上是同時運行的,例如我們可以一邊瀏覽網頁,一邊聽音樂。而CPU執行代碼同一時間只能執行一條,但即使我們的電腦是單核CPU也可以同時運行多個任務,如下圖所示,這是因為我們的 CPU 的 ...
  • 掌握使用Python進行文本英文統計的基本方法,並瞭解如何進一步優化和擴展這些方法,以應對更複雜的文本分析任務。 ...
  • 背景 Redis多數據源常見的場景: 分區數據處理:當數據量增長時,單個Redis實例可能無法處理所有的數據。通過使用多個Redis數據源,可以將數據分區存儲在不同的實例中,使得數據處理更加高效。 多租戶應用程式:對於多租戶應用程式,每個租戶可以擁有自己的Redis數據源,以確保數據隔離和安全性。 ...