第十章-資料庫恢復技術

来源:https://www.cnblogs.com/Mr-shne/archive/2022/11/29/16905843.html
-Advertisement-
Play Games

10.1 事務的基本概念: 什麼是事務?事務是用戶定義的一個資料庫操作序列,該操作要麼全做,要麼全不做,是一個不可分割的工作單位,是恢復(知識點)和併發控制(知識點)的基本單位 事務和程式的區別: 在關係資料庫中,一個事務可以是一條SQL語句,或多條SQL語句,或整個程式 一個程式可以有多個事務 事 ...


10.1 事務的基本概念:

  • 什麼是事務?事務是用戶定義的一個資料庫操作序列,該操作要麼全做,要麼全不做,是一個不可分割的工作單位,是恢復(知識點)和併發控制(知識點)的基本單位
  • 事務和程式的區別
    • 在關係資料庫中,一個事務可以是一條SQL語句,或多條SQL語句,或整個程式
    • 一個程式可以有多個事務
  • 事務定義:- 正常結束和異常結束
    • 正常結束: -- 正常執行後,SQL的操作就寫回到磁碟中
      • BEGIN TRANSCTION; -- 事務開始
            SQL 語句; 
        COMMIT; -- 事務提交
    • 異常結束:--異常結束,SQL的所以操作都撤銷,回到事務開始前

      • BEGIN TRANSCTION; -- 事務開始
            SQL 語句; 
        ROLLBACK; -- 事務回滾
  • 事務的特性: -- 考試考

    • 特征:原子性、一致性、隔離性、持續性
    • 原子性:
      • 事務是資料庫的邏輯工作單位,事務中包括的諸操作要麼不做,要麼全做
    • 一致性:
      • 先理解什麼是一致性?就是用戶A讀學生表數據為99,用戶B讀取就不能是100,必須是99一致的
      • 事務的執行結果必須是使資料庫從一個一致性狀態到另一個一致性狀態
      • 一致狀態:資料庫中只包含成功事務提交結果
      • 不一致狀態:資料庫系統運行在發生故障,有些事務被迫中斷過(如斷了),這些未完成的事務對資料庫做了一部分修改,寫入了物理資料庫,這時候資料庫就處於不正確的狀態 -- 解決辦法事務回滾,數據恢復           
    • 原子性和一致性的舉例:
      • 銀行轉賬,那些就必須定義為一個事務,兩個操作全做,如用戶A給用戶B轉1萬,用戶A減少一萬,突然斷電,那麼用戶減少1萬,用戶B要沒有加上1萬,這就是不一致狀態,如果成功就是一致狀態      
    • 隔離性:
      • 一個事務執行不能被其它事務干擾(如交叉執行事務),即一個事務的內部操作及使用的數據對其他併發事務是隔離的,併發執行的各個事務之間都不能相互干擾
    • 持久性:-- 也叫永久性
      • 一個事務一旦提交,對資料庫中數據的改本就是永久性的,接下來的操作或故障對其執行結果沒有影響
    • 事務是恢復和併發控制的基本單位,保證事務ACID特征是事務管理的重要任務
    • 事務ACID日誌可能遭到破壞的因素有:
      • 多個事務併發運行,不同事務的操作交叉執行
        • 資料庫管理系統必須保證多個事務的交叉運行不影響這些事務的隔離性  
      • 事務在運行過程中被強行停止  
        • 資料庫管理系統必須保證被強行終止的事務對資料庫和其他事務沒有任何影響 

10.2 資料庫的恢復概述:

  • 故障是不可避免的,故障主要包括:電腦硬碟故障、軟體的錯誤、操作員的失誤、惡意的破壞等
  • 故障對數據的影響主要表現為:運行事務非正常中斷,影響資料庫中的數據正確性、資料庫全部或部分丟失數據等
  • 資料庫恢復作用:把資料庫從錯誤狀態恢復到某一已知的正確狀態的功能
  • 資料庫恢復子系統是資料庫管理系統的一個重要組成部分,而且還相當龐大,常常占整個資料庫系統代碼的10%以上。恢復技術是衡量系統的性能優劣的重要指標,以為對系統的可靠程度起到決定因素                            

10.3 故障的種類:

  • 故障的種類大致分為四類: 事務內部的故障、系統故障、介質故障(介質==硬體)、電腦病毒
  • 1.事務內部的故障:
    • 事務內部的故障有的是可以通過事務程式本身發現的(如轉賬的例子)有的是非預期的,不能由事務程式處理的 
    • 細節1:事務的內部更多的故障的是非預期的,是不能由應用程式處理的。如演算法溢出、死鎖
    • 細節2:事務的故障意味著事務沒有達到預期的終點,資料庫可能處於不正確狀態。撤銷該事務已經作出任何對資料庫的修改,使得該事務好像根本沒有啟動一樣,這類恢復操作稱為:事務撤銷 
  • 2.系統故障:
    • 系統故障又稱軟故障,是指系統正常運行突然被破壞,記憶體在的緩衝區信息全部丟失去,所有正在運行的事務都非正確終止
      • 常見原因:CPU故障,操作系統故障、資料庫系統代碼錯誤、系統斷電
    • 系統故障的恢復:
      • 常見問題1:系統發生故障,一些未完成的事務結果已經寫入到物理資料庫(磁碟),造成資料庫處於不正確狀態
        • 恢復辦法:系統重新啟動,恢復程式重新讓所有的非正常終止的事務回滾,強行撤銷所有未完成事務
      • 常見問題2:系統發生故障,某些已經完成的事務可能還留在緩衝區,沒有寫到物理資料庫中,因為沒有寫入,導致執行事務的操作(如:增刪改查),全部丟失,導致資料庫數據不一致
        • 恢復辦法:系統重新啟動,撤銷所有未完成的事務,還需要重做,所有提交的事務,將資料庫恢復到一致狀態 
  • 3.介質故障:
    • 介質故障又硬故障,是指外存故障,如磁碟損壞、磁頭碰撞,強磁干擾等
    • 故障表現:破壞資料庫或部分資料庫 
  • 4.電腦病毒:
    • 電腦病毒是一種可繁殖、傳播並對電腦造成破壞
    • 電腦病毒特點:隱蔽性、潛伏性、傳染性、破壞性、寄生性
    • 資料庫本病毒破壞時,仍要用恢復技術來恢復
  • 小結:
    • 1.故障對資料庫的影響主要是資料庫本身被破壞和,數據沒有被破壞,但數據不正確
    • 2.恢復操作的基本原理就是冗餘(就是備份),符合子系統的代碼一般要占到全部代碼的10%以上 

10.4 恢復的實現實現技術:

  • 恢複數據的關鍵就是創建冗餘(備份)數據,然後利用執行冗餘數據進行資料庫恢復

  • 建立冗餘數據的常見方法:
      數據轉儲:就是把數據建立一個備份,然後存儲在另外一臺設備上
      日誌文件:就是事務對資料庫進行了什麼操作都記錄下來

  • 通過數據轉存和日誌文件就可以把資料庫符合到某一個正確的結點
          如:7月15號到9月20號,9月20號發生錯誤,7月15號進行了數據轉儲,在通過日誌文件把資料庫恢復到9月20號沒有發生故障的狀態                            

10.4.1 數據轉儲:

  • 什麼是數據轉儲?就是把數據建立一個備份,然後存儲在另外一臺設備上,這些備份的數據文本稱為後備副本或後援副本
  • 註意:後備副本只是把資料庫恢復到轉儲的狀態,要想符合到故障發生的狀態,還需要進行轉儲後的所有更新事務
  • 轉儲狀態:靜態轉儲與動態轉儲
    • 靜態轉儲:需要中系統無任何事務進行時進行轉儲操作,轉儲期間不允許對資料庫進行增刪改查
      例子:如游戲伺服器正在維護,玩家都不能進入,就沒有新的事務發生,那麼就可以進行靜態轉儲
      優點:實現方便
      缺點:降低了資料庫的可用性,以為需要等轉儲結束,新的事務才能開始
    • 動態轉儲:事務和轉儲併發進行,轉儲期間允許對資料庫進行增刪改查
      例子:轉儲期間,剛把事務A的100記錄到磁碟上,某一事務就將A改成了200,後備副本上的A數據就過時了
      優點:不用等正在運行的用戶事務結束,不會影響新事務的運行
      缺點:不能保證副本中的數據真時有效(看上面例子就知道為什麼了)
  • 細節1:利用動態轉儲得到副本,還需要把各事務(就是併發的事務)對資料庫的修改記錄下來,建立成日誌文件。通跟後備副本和日誌文件就能把資料庫恢復到某人正確的結點
  • 細節2:利用靜態轉儲得到副本,就不需要把事務記錄下來,以為靜態記錄的就是正確的,而且它轉儲也不可能有事務進行
  • 轉儲方式:

    • 海量轉儲:每次轉儲全部資料庫
      增量轉儲:轉儲上一次轉儲後更新過的數據
      海量和增量比較:
        從恢復角度看,使用海量轉儲得到的後備副本進行恢復更加方便,因為轉儲的是全部資料庫,
        如果資料庫較大,事務處理頻繁,增量就更實用更有效,因為事務多數據老是在變化,就不可能每次都海量轉儲

  • 轉儲分類:

    • 通過轉儲狀態和轉儲方式可以分為4類:動態海量轉儲、靜態海量轉儲、動態增量轉儲、靜態增量轉儲  

 

10.4.2 登記日誌文件:

  • 日誌的主要目的:記錄事務等資料庫的更新操作的文件(註意是更新操作,因為查詢沒有影響)
  • 記錄日誌的兩種格式,單位的日誌文件和數據塊單位的日誌文件:(這些操作都是由於資料庫自動來完成)
  • 單位的日誌文件需要登記的內容:
    • 1.各事務開始的標簽
      2.個事務結束的標準(正確結束,的還是非正常結束的標簽)
      3.各事務的所有更新操作
      以上3條記錄的操作記錄為一個日誌記錄

  • 每條日誌記錄的內容:

    • 事務標識(標明是哪各事務)
      操作類型(插入、刪除或修改)
      操作對象(如操作是哪個表,哪條數據)
      更新前數據的舊值(如果是插入,該項就是空值)
      更新後數據的新值(如果是刪除,該項就是空值)

  • 數據塊為單位的日誌文件需要登記的內容:

    • 1.事務標識
      2.被更新的數據塊 - 就是以一整個事務為一個單位

  • 日誌文件的作用:

    • 1.事務故障恢復
      2.系統故障恢復
      3.配合後備副本進行介質故障恢復

 

 

  • 登錄日誌文件要遵循兩條原則:
    • 1.登錄的次序嚴格按併發事務執行的時間次序
      2.必須先寫日誌文件,後寫資料庫(如果先寫資料庫,如果突然斷電,資料庫寫了日誌沒寫,恢復時就會有影響)

10.5 恢復策略:

  • 同的故障需要不同的恢復策略

10.5.1 事務故障的恢復:

  • 事務的故障是指事務在正常運行至正常終點前被終止
  • 事務故障的恢復是由系統自動完成的,系統的恢復步驟是:
    • 1.反向掃描,查找事務的更新操作
      2.對事務進行撤銷
      3.繼續反向掃描,查找該事務其它的更新查找,並做同樣的處理
      4.直到事務讀到事務開始標識,事務故障符合就完成
      10.5.2 系統的故障

10.5.2 系統的故障:

  • 系統的故障會造成資料庫不一致狀態,原因:
    • 1.未完成的事務的更新操作可能已經寫入資料庫 -- 解決辦法撤銷未完成的事務
      2.已提交的事務可能還停留在緩衝區,沒有寫到資料庫 -- 解決辦法重做已完成的事務

  • 系統故障的恢復由系統在重新啟動時自動完成

10.5.3 介質故障:

  • 介質故障指的是物理數據和日誌文件被破壞
  • 恢復辦法是重裝資料庫,然重做已完成的事務
  • 介質的恢復需要資料庫管理員的介入,資料庫管理員只需要重裝最近轉儲的資料庫副本和有關的日誌文件,然後執行系統提供的恢覆命令即可

10.6 具有檢查點的恢復技術:

  • 為什麼需要檢查點技術:
    • 在利用日誌恢複數據庫恢復時,恢復子系統的時候必須搜索日誌,確定哪些事務需要重新做,哪些事務要撤銷
      • 問題1:搜索整個日誌需要大量時間
        問題2:重做處理、重新執行,浪費大量時間

  • 解決方案:

    • 1.在日誌文件中增加檢查點記錄
      2.增加重新開始的文件 - 和日誌文件是併列的,不在日誌文件裡面
      3.恢復子系統在登錄日誌文件期間動態地維護日誌

  • 檢查點記錄的內容:

    • 1.所有正在執行的事務清單
      2.這些事務最近一個日誌記錄地址

  • 重新開始文件內容:

    • 1.檢查點記錄地址

  • 動態維護日誌文件的方法:

    • 周期性地執行如下操作:建立檢查點、保持資料庫狀態

    • 具體步驟:

      • 1.將當前日誌緩衝區的所有日誌寫入磁碟的日誌文件
        2.在日誌文件中寫入一個檢查點記錄
        3.將當前的數據緩衝區的所有數據記錄寫入磁碟的資料庫中
        4.把檢查點記錄在日誌文件中的地址寫入重新開始文件

    • 說明:

      • 恢復子系統可以定期或不定期地建立檢查點,保存資料庫狀態
        檢查點可以按照預定的一個時間來間隔來建立,如一個小時記錄一個檢查點
        也可以按照某種規則建立檢查點。如日誌文件寫到一半建立

  • 利用檢查點恢復策略:

    • 所有檢查點方法可以改善恢復效率
      1.T1在檢查點之前提交,對資料庫的修改已經寫到資料庫
      2.T2在檢查點之後,故障之前,所有需要重做
      3.T3在故障之後需要撤銷
      4.T4在故障點之前提交,需要重做
      5.T5在檢查點之後,故障之前,需要撤銷

  • 系統使用檢查點的恢復步驟:

    • 1.從重新開始文件找到最後一個檢測點,在日誌文件中的地址,由該地址在日誌文件中找到最後一個檢測點記錄

    • 2.檢查建立後得到所有正在執行的事務清單ACTIVE-LIST(活躍的),分成兩個事務對列:

      • 1.UNNDO-LIST:需要執行撤銷操作的的事務集合

      • 2.REDO-LIST:需要執行重做操作的事務集合
        ACTIVE-LIST暫時放入UNNDO-LIST,只是暫時(要看該事務是在說明時候提交的,如T4就先放程式隊列,但發現它是在故障發前提交就放到重做隊列)

      • 3.從檢查點掃描日誌文件

        • 1.有新的事務就暫時放到UNNDO-LIST
          2.有提交就從UNNDO-LIST放到REDO-LIST - T4案例

      • 4.UNNDO-LIST的每個事務要執行UNNDO操作,REDO-LIST的每個事務要執行REDO操作

10.7 資料庫鏡像:

  • 目的:預防介質故障,提高資料庫可能性
  • 什麼是資料庫鏡像:
    • 資料庫管理系統自動把整個數據或其中關鍵數據複雜到另一個磁碟,主資料庫數據更新,資料庫管理系統把更新後的數據複製過去,保證鏡像資料庫與主數據的一致
  • 如果介質出現故障怎麼辦:

    • 所有應用去訪問鏡像資料庫,鏡像資料庫有去恢復主資料庫,如果沒有發生故障可以併發操作  

10.8 總結:

  • 1.保證資料庫的一致性是對資料庫的基本要求
    2.事務是資料庫的邏輯工作單位
    3.事務的ACID特征:一致性、隔離性、原子性、持久性
    4.保證了事務ACID特征就是保證了,資料庫的一致性
    5.故障的恢復是,保證事務的,一致性、隔離性、原子性
    6.恢復的基本原理就是利用後備副本、日誌文件、資料庫鏡像中的冗餘數據來重構資料庫
    7.事務不僅是恢復的基本單位,也是併發控制的單位
    8.保證事務的一致性、隔離性,資料庫隔離系統需要對併發操作操作進行控制

 

 

   

       

  

      

    

    

  

 

 

      

  

      

  

          

      

 

 

 

 

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 問題:是不是虛函數的調用就一定是動態綁定?不是的 1:在類的構造函數當中,調用虛函數,也是靜態綁定(構造函數中對虛函數的調用不發生動態綁定) 2:如果不是通過指針或者引用變數來調用虛函數,那就是靜態綁定 代碼1 class Base { public: Base(int data=10):ma(da ...
  • 使用Apache PDFBox實現拆分、合併PDF 問題背景 如何拆分PDF? 如何合併PDF? 如何拆分併合並PDF實現去除PDF的某些頁? Apache PDFBox介紹 Apache PDFBox 1.8.10官方文檔 Apache PDFBox 庫是一個開源的 Java 工具,用於處理 PD ...
  • 作者:小牛呼嚕嚕 | https://xiaoniuhululu.com 電腦內功、JAVA源碼、職業成長、項目實戰、面試相關資料等更多精彩文章在公眾號「小牛呼嚕嚕」 前言 讀過筆者之前的一篇文章Java記憶體模型(JMM)詳解, 我們知道了由於電腦為了充分利用CPU的高性能,以及各個硬體 存取速 ...
  • public static void GetRegistData() { string name = "huishuangzhu"; //搜索到註冊表根目錄 RegistryKey hkml = Registry.ClassesRoot; //搜索到註冊表根目錄下的XXX文件夾。 RegistryK ...
  • 溫馨提示,請使用ctrl+F進行快速查找 ws2_32.lib error LNK2001: 無法解析的外部符號 __imp_htons error LNK2001: 無法解析的外部符號 __imp_ntohl error LNK2001: 無法解析的外部符號 __imp_ntohs error L ...
  • 1、什麼是MQTT? MQTT(Message Queuing Telemetry Transport,消息隊列遙測傳輸協議),是一種基於發佈/訂閱(publish/subscribe)模式的"輕量級"通訊協議,該協議構建於TCP/IP協議上,由IBM在1999年發佈。MQTT最大優點在於,可以以極 ...
  • 1.玻利維亞 MOPSV 為 5G 移動服務分配 3.3-3.6 GHz 頻段 https://www.oopp.gob.bo/wp-content/uploads/2022/10/2022-RM-174-Modificacion-al-Plan-Nacional-de-Frecuencia.pdf ...
  • 視圖 create view ... as ps:SQL文件在上一篇博客末尾 視圖就是通過查詢得到一張虛擬表,然後保存下來,下次直接使用 create view teacher_course as select * from teacher inner join course on teacher. ...
一周排行
    -Advertisement-
    Play Games
  • 1.部署歷史 猿友們好,作為初來實習的我,已經遭受社會的“毒打”,所以請容許我在下麵環節適當吐槽,3Q! 傳統部署 ​ 回顧以往在伺服器部署webapi項目(非獨立發佈),dotnet環境、守護進程兩個逃都逃不掉,正常情況下還得來個nginx代理。不僅僅這仨,可能牽扯到yum或npm。node等都要 ...
  • 隨著技術的進步,跨平臺開發已經成為了標配,在此大背景下,ASP.NET Core也應運而生。本文主要基於ASP.NET Core+Element+Sql Server開發一個校園圖書管理系統為例,簡述基於MVC三層架構開發的常見知識點,前一篇文章,已經簡單介紹瞭如何搭建開發框架,和登錄功能實現,本篇... ...
  • 這道題只要會自定義cmp恰當地進行排序,其他部分沒有什麼大問題。 上代碼: 1 #include<bits/stdc++.h> 2 using namespace std; 3 int n,s,h1,h2,cnt; 4 struct apple{ 5 int height,ns;//height為蘋 ...
  • 這篇文章主要描述RPC的路由策略,包括為什麼需要請求隔離,為什麼不在註冊中心中實現請求隔離以及不同粒度的路由策略。 ...
  • 簡介: 中介者模式,屬於行為型的設計模式。用一個中介對象來封裝一系列的對象交互。中介者是各對象不需要顯式地相互引用,從而使其耦合鬆散,而且可以獨立地改變他們之間的交互。 適用場景: 如果平行對象間的依賴複雜,可以使用中介者解耦。 優點: 符合迪米特法則,減少成員間的依賴。 缺點: 不適用於系統出現對 ...
  • 【前置內容】Spring 學習筆記全系列傳送門: Spring學習筆記 - 第一章 - IoC(控制反轉)、IoC容器、Bean的實例化與生命周期、DI(依賴註入) Spring學習筆記 - 第二章 - 註解開發、配置管理第三方Bean、註解管理第三方Bean、Spring 整合 MyBatis 和 ...
  • 簡介: 享元模式,屬於結構型的設計模式。運用共用技術有效地支持大量細粒度的對象。 適用場景: 具有相同抽象但是細節不同的場景中。 優點: 把公共的部分分離為抽象,細節依賴於抽象,符合依賴倒轉原則。 缺點: 增加複雜性。 代碼: //用戶類 class User { private $name; fu ...
  • 這次設計一個通用的多位元組SPI介面模塊,特點如下: 可以設置為1-128位元組的SPI通信模塊 可以修改CPOL、CPHA來進行不同的通信模式 可以設置輸出的時鐘 狀態轉移圖和思路與多位元組串口發送模塊一樣,這裡就不給出了,具體可看該隨筆。 一、模塊代碼 1、需要的模塊 通用8位SPI介面模塊 `tim ...
  • AOP-03 7.AOP-切入表達式 7.1切入表達式的具體使用 1.切入表達式的作用: 通過表達式的方式定義一個或多個具體的連接點。 2.語法細節: (1)切入表達式的語法格式: execution([許可權修飾符] [返回值類型] [簡單類名/全類名] [方法名]([參數列表]) 若目標類、介面與 ...
  • 測試一、虛繼承與繼承的區別 1.1 單個繼承,不帶虛函數 1>class B size(8): 1> + 1> 0 | + (base class A) 1> 0 | | _ia //4B 1> | + 1> 4 | _ib //4B 有兩個int類型數據成員,占8B,基類邏輯存在前面 1.2、單個 ...