MySQL性能優化盲區(高併發情況下,事務內的數據先更新還是先查詢?)

来源:https://www.cnblogs.com/phpphp/p/18074957
-Advertisement-
Play Games

近期看到了一個前阿裡資深開發的學術分析視頻: 高併發情況下,一個事務內有更新操作還有查詢操作,那是先更新好,還是先無鎖查詢好? 僅70秒的視頻,深感學問太深,但是海哥講的有待補充,於是寫下了這篇文章,作為補充。 鳴謝:前阿裡資深開發極海Channel的技術分享。 先說答案 這是個開放性的問題,必須看 ...


近期看到了一個前阿裡資深開發的學術分析視頻:
高併發情況下,一個事務內有更新操作還有查詢操作,那是先更新好,還是先無鎖查詢好?
僅70秒的視頻,深感學問太深,但是海哥講的有待補充,於是寫下了這篇文章,作為補充。

鳴謝:前阿裡資深開發極海Channel的技術分享。

先說答案

這是個開放性的問題,必須看業務場景,拋開業務場景談架構設計,都是耍流氓。

  • 場景1:如果update語句的參數操作依賴於查詢操作,那麼必須先查詢,再更新,否則update語句的參數都湊不齊。
  • 場景2:如果update語句的參數操作不依賴於查詢操作,但兩個操作的是一張表,業務強制要求select獲取的數據必須是最新的,則也需要先更新再讀取。
  • 場景3:以上兩種情況除外,則優先考慮先查詢再更新。

場景1受參數限制,順序毋庸置疑。
場景2受業務限制,順序毋庸置疑。
場景3是為了性能優化,才去選擇的方案。

測試表

CREATE TABLE `cs` (
  `id` int(10) unsigned NOT NULL AUTO_INCREMENT,
  `num` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '數字列',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci;

INSERT INTO `temp`.`cs` (`id`, `num`) VALUES (1, 1);
INSERT INTO `temp`.`cs` (`id`, `num`) VALUES (2, 2);
INSERT INTO `temp`.`cs` (`id`, `num`) VALUES (3, 3);


假設場景2的代碼如下:
start transaction;
update cs set num = 13 where id = 1;
SELECT * FROM `cs`;
commit;


場景3的代碼如下:
start transaction;
SELECT * FROM `cs`;
update cs set num = 13 where id = 1;
commit;

對場景2,同一個事務內,先執行update,事務沒提交,能讀取到最新的數據嗎?

能。

步驟 SQL 補充
1 start transaction; 開啟事務
2 select num from cs where id = 1; num值是1
3 update cs set num = 12 where id = 1; 更新num值為12
4 select num from cs where id = 1; num值是12
5 rollback; 回滾事務

都說不加鎖的select是快照讀,為什麼select還能讀取當前事務的最新數據?

根據現象反推,個人認為:
不加鎖的select是快照讀,針對的是事務之外的不加鎖的select,MySQL RR的隔離級別,只要更新的事務未提交,其它事務就讀取不到更改的新數據。
當前事務內的select,就是不加鎖的當前讀(個人稱謂)。當然,真正的當前讀概念是為了保證讀的最新數據,必須加鎖。

對場景3的性能優化原理分析

得知道4個前提:

  1. 場景3的實現,不會影響業務和開發。
  2. 因為select沒有加S或X鎖,所以不會阻塞。
  3. update語句會上X鎖,可能是行鎖、間隙鎖,或者表鎖(受索引、where條件的影響),所以併發請求過來後,其它事務的update有被阻塞的可能。
  4. 用事務,就需要InnoDB引擎,InnoDB引擎支持行級鎖,如果確定update的X鎖,在併發情況下鎖定的範圍沒有交集,這種優化方式起不到作用,這意味著不會阻塞。
  • 如果先更新再查詢:
    分析原理:
    事務A的update語句會上鎖,併發情況下阻塞事務B的update操作,如果事務A的select是個慢查詢,事務A的X鎖釋放需要等到事務提交,而不是update語句本身執行完畢,這就意味著事務A select的環節,X鎖也未釋放,從而阻塞其它事務的update,降低性能。
    實操模擬:
步驟 事務A 事務B 補充
1 start transaction; start transaction; 雙方開啟事務,模擬併發請求
2 update cs set num = 1234 where id = 1; update cs set num = 1234; 兩個不同where範圍的update,模擬線上的場景
3 / 阻塞 事務A的行X鎖,阻塞了事務B的表X鎖
4 select * from cs where id = 1; 阻塞 這一步很重要,優化就是為了避免這一步的阻塞耗時,特別是慢查詢
5 commit; 阻塞 事務A提交
6 / select * from cs where id = 1; 事務A完成,事務B不會再阻塞了
7 / commit; 結束事務B
  • 如果先查詢再更新:
    分析原理:事務A的select語句不會上鎖,此時事務不會導致事務B阻塞,如果執行到事務A執行到update,才回去上X鎖,直到事務提交鎖資源釋放,即使事務A的select是一個慢查詢,也不會加大事務A釋放鎖資源的事件,進而減少事務B的阻塞時間。
    實操模擬:
步驟 事務A 事務B 補充
1 start transaction; start transaction; 雙方開啟事務,模擬併發請求
2 select * from cs where id = 1; select * from cs where id = 1; 兩個事務不加鎖不阻塞,這一步的阻塞時間省了
3 update cs set num = 1234 where id = 1; update cs set num = 1234; 兩個事務更新
4 / 阻塞 兩個X鎖範圍有衝突,阻塞
5 commit; 阻塞 事務A提交
6 / commit; 事務B提交

所以說,只要業務允許,調整SQL語句的執行順序,高併發情況下,就能得到不小的性能提升,但是這一點很容易忽略。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • ASP.NET Core 中的框架中發出大量診斷事件,包括當前請求進入請求完成事件,HttpClient發出收到與響應,EFCore查詢等等。 我們可以利用DiagnosticListener來選擇性地監聽這些事件,然後通過自己的方式組織這些日誌,實現無侵入的分散式跟蹤。 下麵我們通過Diagnos ...
  • 概述:C#中的Attribute(特性)為程式元素提供了靈活的元數據機制。除基礎應用外,可高級應用於自定義代碼生成、AOP等領域。通過示例展示了Attribute在AOP中的實際用途,以及如何通過反射機制獲取並執行與Attribute相關的邏輯。 在C#中,Attribute(特性)是一種用於為程式 ...
  • 概述:.NET中實現數字轉大寫金額可通過現有庫或自定義方法。自定義方法示例使用遞歸將數字分段轉換為中文大寫金額,處理了千、百、十、個位數。實際應用中可根據需求進一步擴展,例如處理小數部分或負數。 在.NET中,你可以使用以下方案之一來實現將數字轉成大寫金額: 使用現有庫: .NET框架中有一些庫已經 ...
  • (適用於.NET/.NET Core/.NET Framework)【目錄】0.前言1.第一個AOP程式2.Aspect橫切麵編程3.一個橫切麵程式攔截多個主程式4.多個橫切麵程式攔截一個主程式5.優勢總結6.展望 0.前言AOP(Aspect Oriented Programming)是“面向橫切 ...
  • 前幾天,點開自己的博客,看了一下 CYQ.Data V5系列 都有哪些文章,發現了一篇2019年寫的:CYQ.Data 對於分散式緩存Redis、MemCache高可用的改進及性能測試,於是點進去看了看。感覺文章中有些表述存有問題,,不過不是重點。 重點,看了裡面的測試結論,如果四五年過去了,CYQ... ...
  • 之前的“性能優化的一般策略及方法”一文中介紹了多種性能優化的方法。根據以往的項目經驗,開啟編譯器優化選項可能是立竿見影、成本最低、效果最好的方式了。 這麼說可能還不夠直觀,舉個真實的例子:我所參與的自動駕駛的項目中,無需修改任何代碼,僅僅增加一個 -O2 選項,進程整體的 CPU loading 可 ...
  • 伺服器部署項目總結 yzh 24/3/15 歡迎查看CSDN的博文https://blog.csdn.net/AN_NI_112/article/details/136749033?spm=1001.2014.3001.5501 前言 本著一定成功的信心去部署前後端分離的項目,結果卻“路遇坎坷” ...
  • IndexedDB是一種在瀏覽器端存儲數據的方式,它豐富了客戶端的查詢方式,由於是本地存儲,可以有效減少網路對頁面數據的影響。這使得瀏覽器可以存儲更多的數據,從而豐富了瀏覽器端的應用類型。 IndexedDB與傳統的關係型資料庫不同,它是一個key-value型的資料庫。其中,value可以是複雜的 ...
一周排行
    -Advertisement-
    Play Games
  • C#TMS系統代碼-基礎頁面BaseCity學習 本人純新手,剛進公司跟領導報道,我說我是java全棧,他問我會不會C#,我說大學學過,他說這個TMS系統就給你來管了。外包已經把代碼給我了,這幾天先把增刪改查的代碼背一下,說不定後面就要趕鴨子上架了 Service頁面 //using => impo ...
  • 委托與事件 委托 委托的定義 委托是C#中的一種類型,用於存儲對方法的引用。它允許將方法作為參數傳遞給其他方法,實現回調、事件處理和動態調用等功能。通俗來講,就是委托包含方法的記憶體地址,方法匹配與委托相同的簽名,因此通過使用正確的參數類型來調用方法。 委托的特性 引用方法:委托允許存儲對方法的引用, ...
  • 前言 這幾天閑來沒事看看ABP vNext的文檔和源碼,關於關於依賴註入(屬性註入)這塊兒產生了興趣。 我們都知道。Volo.ABP 依賴註入容器使用了第三方組件Autofac實現的。有三種註入方式,構造函數註入和方法註入和屬性註入。 ABP的屬性註入原則參考如下: 這時候我就開始疑惑了,因為我知道 ...
  • C#TMS系統代碼-業務頁面ShippingNotice學習 學一個業務頁面,ok,領導開完會就被裁掉了,很突然啊,他收拾東西的時候我還以為他要旅游提前請假了,還在尋思為什麼回家連自己買的幾箱飲料都要叫跑腿帶走,怕被偷嗎?還好我在他開會之前拿了兩瓶芬達 感覺感覺前面的BaseCity差不太多,這邊的 ...
  • 概述:在C#中,通過`Expression`類、`AndAlso`和`OrElse`方法可組合兩個`Expression<Func<T, bool>>`,實現多條件動態查詢。通過創建表達式樹,可輕鬆構建複雜的查詢條件。 在C#中,可以使用AndAlso和OrElse方法組合兩個Expression< ...
  • 閑來無聊在我的Biwen.QuickApi中實現一下極簡的事件匯流排,其實代碼還是蠻簡單的,對於初學者可能有些幫助 就貼出來,有什麼不足的地方也歡迎板磚交流~ 首先定義一個事件約定的空介面 public interface IEvent{} 然後定義事件訂閱者介面 public interface I ...
  • 1. 案例 成某三甲醫預約系統, 該項目在2024年初進行上線測試,在正常運行了兩天後,業務系統報錯:The connection pool has been exhausted, either raise MaxPoolSize (currently 800) or Timeout (curren ...
  • 背景 我們有些工具在 Web 版中已經有了很好的實踐,而在 WPF 中重新開發也是一種費時費力的操作,那麼直接集成則是最省事省力的方法了。 思路解釋 為什麼要使用 WPF?莫問為什麼,老 C# 開發的堅持,另外因為 Windows 上已經裝了 Webview2/edge 整體打包比 electron ...
  • EDP是一套集組織架構,許可權框架【功能許可權,操作許可權,數據訪問許可權,WebApi許可權】,自動化日誌,動態Interface,WebApi管理等基礎功能於一體的,基於.net的企業應用開發框架。通過友好的編碼方式實現數據行、列許可權的管控。 ...
  • .Net8.0 Blazor Hybird 桌面端 (WPF/Winform) 實測可以完整運行在 win7sp1/win10/win11. 如果用其他工具打包,還可以運行在mac/linux下, 傳送門BlazorHybrid 發佈為無依賴包方式 安裝 WebView2Runtime 1.57 M ...