搜尋
首頁資料庫mysql教程MySQL中binlog/redolog/undolog差別是什麼

MySQL binlog/redolog/undolog 的差別?

想跟大家聊聊InnoDB 中的鎖定機制,那麼不可避免的要牽涉到MySQL 的日誌系統,binlog、redo log、undo log 等,看到有小夥伴總結的這三個日誌還不錯,趕緊拿來和各位小夥伴分享。

日誌是mysql資料庫的重要組成部分,記錄著資料庫運作期間各種狀態資訊。 mysql日誌主要包括錯誤日誌、查詢日誌、慢查詢日誌、交易日誌、二進位日誌幾大類。

作為開發,我們重點需要關注的是二進位日誌(binlog)和交易日誌(包括redo logundo log),本文接下來會詳細介紹這三種日誌。

bin log

binlog用於記錄資料庫執行的寫入性操作(不包括查詢)信息,以二進位的形式保存在磁碟中。 binlogmysql的邏輯日誌,並且由Server層進行記錄,使用任何儲存引擎的mysql資料庫都會記錄 binlog日誌。

  • 邏輯日誌:可以理解為記錄的就是sql語句.

  • #物理日誌:mysql資料最終是保存在資料頁中的,實體日誌記錄的就是資料頁變更。

binlog是透過追加的方式進行寫入的,可以透過max_binlog_size參數設定每個binlog文件的大小,當檔案大小達到給定值之後,會產生新的檔案來保存日誌。

在實際應用中,binlog的主要使用場景有兩個,分別是主從複製和資料恢復。

  • 主從複製:在Master#端開啟binlog,然後將binlog傳送到各個Slave 端,Slave端重播binlog因此達到主從資料一致。

  • 資料恢復:透過使用mysqlbinlog工具來恢復資料。

binlog刷盤時機

對於InnoDB儲存引擎而言,只有在交易提交時才會記錄biglog ,此時記錄還在記憶體中,那麼biglog是什麼時候刷到磁碟中的呢?

mysql透過sync_binlog參數控制biglog的刷盤時機,取值範圍是0-N

  • 0:不強制要求,由系統自行判斷何時寫入磁碟;

  • 1:每次commit的時候都要將binlog寫入磁碟;

  • N:每N個事務,才會將binlog寫入磁碟。

從上面可以看出,sync_binlog最安全的是設定是1,這也是MySQL 5.7.7之後版本的預設值。但是設定一個大一些的值可以提升資料庫效能,因此實際情況下也可以將值適當調大,犧牲一定的一致性來獲得更好的效能。

binlog日誌格式

binlog日誌有三種格式,分別為STATMENTROWMIXED

MySQL 5.7.7之前,預設的格式是STATEMENTMySQL 5.7.7之後,預設值是ROW 。日誌格式透過binlog-format指定。

  • STATMENT:基於SQL 語句的複製( statement-based replication, SBR# ),每一條都會修改資料的sql語句會記錄到binlog 中 。

  • ROW:基於行的複製(row-based replication, RBR

    #ROW
  • :基於行的複製(
  • row-based replication, RBR

     ),不記錄每個sql語句的上下文訊息,僅需記錄哪一條數據被修改了。 MIXED:基於STATMENT 與 ROW 兩種模式的混合複製(mixed-based replication , MBR ),一般的複製使用STATEMENT# 模式保存 binlog ,對於 STATEMENT 模式無法複製的操作使用 

    ROW
  •  #STATEMENT
 模式無法複製的操作使用 

ROW

 模式模式保存 

binlog

redo log為什麼需要redo log

我們都知道,事務的四大特性裡面有一個是持久性,具體來說就是只要交易提交成功,那麼對資料庫做的修改就被永久保存下來了,不可能因為任何原因再回到原來的狀態。 ######那麼###mysql###是如何保證一致性的呢? ######簡單的方法是在每次提交事務時,將涉及修改的所有資料頁刷新到磁碟中。但這麼做會有嚴重的效能問題,主要體現在兩個方面:###
  • 因為Innodb是以為單位進行磁碟互動的,而一個交易很可能只修改一個資料頁裡面的幾個字節,這時候將完整的資料頁刷到磁碟的話,太浪費資源了!

  • 一個交易可能涉及修改多個資料頁,並且這些資料頁在物理上並不連續,使用隨機IO寫入效能太差!

因此mysql設計了redo log,具體來說就是只記錄交易對資料頁做了哪些修改,這樣就能完美地解決效能問題了(相對而言文件更小並且是順序IO)。

redo log基本概念

redo log包含兩個部分:一個是記憶體中的日誌緩衝(redo log buffer),另一個是磁碟上的日誌檔案(redo logfile)。

mysql每執行一條DML語句,先將記錄寫入redo log buffer,後續某個時間點再一次將多筆操作記錄寫到redo log file。這種先寫日誌,再寫磁碟的技術就是MySQL
裡常說到的WAL(Write-Ahead Logging)技術。

在電腦作業系統中,用戶空間(user space)下的緩衝區資料一般情況下是無法直接寫入磁碟的,中間必須經過作業系統核心空間(kernel space)緩衝區(OS Buffer)。

因此,redo log buffer寫入redo logfile其實是先寫入OS Buffer,然後再透過系統呼叫# fsync()將其刷到redo log file
中,流程如下:

MySQL中binlog/redolog/undolog差別是什麼

##mysql支持三種將redo log buffer寫入redo log file的時機,可以透過innodb_flush_log_at_trx_commit參數配置,各參數值意義如下:

MySQL中binlog/redolog/undolog差別是什麼

MySQL中binlog/redolog/undolog差別是什麼

redo log記錄形式

前面說過,

redo log實際上記錄資料頁的變更,而這種變更記錄是沒必要全部保存,因此redo log實作上採用了大小固定,循環寫入的方式,當寫到結尾時,會回到開頭循環寫日誌。如下圖:

MySQL中binlog/redolog/undolog差別是什麼

同時我們很容易得知, 在innodb中,既有

redo log需要刷盤,還有資料頁也需要刷盤,redo log存在的意義主要就是降低對資料頁刷盤的要求** 。

在上圖中,

write pos表示redo log目前記錄的LSN(邏輯序號)位置,check point 表示資料頁變更記錄刷盤後對應redo log所處的LSN(邏輯序號)位置。

write poscheck point之間的部分是redo log空著的部分,用來記錄新的記錄;check pointwrite pos之間是redo log待落盤的資料頁變更記錄。當write pos追上check point時,會先推check point向前移動,空出位置再記錄新的日誌。

啟動

innodb的時候,不管上次是正常關閉還是例外關閉,總是會進行復原操作。因為redo log記錄的是資料頁的物理變化,因此恢復的時候速度比邏輯日誌(如binlog)要快很多。

重啟

innodb時,首先會檢查磁碟中資料頁的LSN,如果資料頁的LSN小於日誌中的 LSN,則會從checkpoint開始恢復。

還有一種情況,在宕機前正處於

checkpoint的刷盤過程,且資料頁的刷盤進度超過了日誌頁的刷盤進度,此時會出現數據頁中記錄的LSN大於日誌中的LSN,這時超出日誌進度的部分將不會重做,因為這本身就表示已經做過的事情,無需再重做。

redo log與binlog區別

MySQL中binlog/redolog/undolog差別是什麼

binlogredo log的差異可知: binlog日誌只用於歸檔,只依賴binlog是沒有crash-safe能力的。

但只有redo log也不行,因為redo logInnoDB特有的,且日誌上的記錄落盤後會被覆寫掉。因此需要binlogredo log二者同時記錄,才能確保當資料庫發生宕機重新啟動時,資料不會遺失。

undo log

資料庫事務四大特性中有一個是原子性,具體來說就是原子性是指對資料庫的一系列操作,要麼全部成功,要麼全部失敗,不可能出現部分成功的情況。

實際上,原子性底層就是透過undo log來實現的。 undo log主要記錄了資料的邏輯變化,例如一條INSERT語句,對應一條DELETEundo log,對於每個UPDATE語句,對應一條相反的UPDATEundo log,這樣在發生錯誤時,就能回滾到交易之前的資料狀態。

同時,undo log也是MVCC(多重版本並發控制)實現的關鍵。

以上是MySQL中binlog/redolog/undolog差別是什麼的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:亿速云。如有侵權,請聯絡admin@php.cn刪除
MySQL字符串類型:存儲,性能和最佳實踐MySQL字符串類型:存儲,性能和最佳實踐May 10, 2025 am 12:02 AM

mySqlStringTypesimpactStorageAndPerformanCeaseAsfollows:1)長度,始終使用theSamestoragespace,whatcanbefasterbutlessspace-felfficity.2)varCharisvariable varcharisvariable length,morespace-morespace-morespace-effficitybuteftife buteftife butfority butfority textifforlyslower.3)

了解MySQL字符串類型:VARCHAR,文本,char等了解MySQL字符串類型:VARCHAR,文本,char等May 10, 2025 am 12:02 AM

mysqlStringTypesIncludeVarChar,文本,char,Enum和set.1)varCharisVersAtileForvariable-lengthStringStringSuptoPuptOuptoPepePecifiedLimit.2)textisidealforlargetStortStorStoverStoverStorageWithoutAutAdefinedLength.3)charlisfixed-lenftenge,for forConsistentDatalikeCodes.4)

MySQL中的字符串數據類型是什麼?MySQL中的字符串數據類型是什麼?May 10, 2025 am 12:01 AM

MySQLoffersvariousstringdatatypes:1)CHARforfixed-lengthstrings,2)VARCHARforvariable-lengthtext,3)BINARYandVARBINARYforbinarydata,4)BLOBandTEXTforlargedata,and5)ENUMandSETforcontrolledinput.Eachtypehasspecificusesandperformancecharacteristics,sochoose

如何向新的MySQL用戶授予權限如何向新的MySQL用戶授予權限May 09, 2025 am 12:16 AM

TograntpermissionstonewMySQLusers,followthesesteps:1)AccessMySQLasauserwithsufficientprivileges,2)CreateanewuserwiththeCREATEUSERcommand,3)UsetheGRANTcommandtospecifypermissionslikeSELECT,INSERT,UPDATE,orALLPRIVILEGESonspecificdatabasesortables,and4)

如何在MySQL中添加用戶:逐步指南如何在MySQL中添加用戶:逐步指南May 09, 2025 am 12:14 AM

toadduserInmysqleffect和securly,跟隨台詞:1)USEtheCreateUserStattoDaneWuser,指定thehostandastrongpassword.2)GrantNecterAryAryaryPrivilegesSustherthing privilegesgeStatement,usifementStatement,adheringtotheprinciplelastprefilegege.3)

mysql:添加具有復雜權限的新用戶mysql:添加具有復雜權限的新用戶May 09, 2025 am 12:09 AM

toaddanewuserwithcomplexpermissionsinmysql,loldtheSesteps:1)創建eTheEserWithCreateuser'newuser'newuser'@''localhost'Indedify'pa ssword';。 2)GrantreadAccesstoalltablesin'mydatabase'withGrantSelectOnMyDatabase.to'newuser'@'localhost';。 3)GrantWriteAccessto'

mysql:字符串數據類型和coltrationsmysql:字符串數據類型和coltrationsMay 09, 2025 am 12:08 AM

MySQL中的字符串數據類型包括CHAR、VARCHAR、BINARY、VARBINARY、BLOB、TEXT,排序規則(Collations)決定了字符串的比較和排序方式。 1.CHAR適合固定長度字符串,VARCHAR適合可變長度字符串。 2.BINARY和VARBINARY用於二進制數據,BLOB和TEXT用於大對像數據。 3.排序規則如utf8mb4_unicode_ci忽略大小寫,適合用戶名;utf8mb4_bin區分大小寫,適合需要精確比較的字段。

MySQL:我應該在Varchars上使用什麼長度?MySQL:我應該在Varchars上使用什麼長度?May 09, 2025 am 12:06 AM

最佳的MySQLVARCHAR列長度選擇應基於數據分析、考慮未來增長、評估性能影響及字符集需求。 1)分析數據以確定典型長度;2)預留未來擴展空間;3)注意大長度對性能的影響;4)考慮字符集對存儲的影響。通過這些步驟,可以優化數據庫的效率和擴展性。

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

VSCode Windows 64位元 下載

VSCode Windows 64位元 下載

微軟推出的免費、功能強大的一款IDE編輯器

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Safe Exam Browser

Safe Exam Browser

Safe Exam Browser是一個安全的瀏覽器環境,安全地進行線上考試。該軟體將任何電腦變成一個安全的工作站。它控制對任何實用工具的訪問,並防止學生使用未經授權的資源。