搜尋
首頁資料庫mysql教程MySQL中binlog/redolog/undolog差別是什麼

MySQL binlog/redolog/undolog 的差別?

想跟大家聊聊InnoDB 中的鎖定機制,那麼不可避免的要牽涉到MySQL 的日誌系統,binlog、redo log、undo log 等,看到有小夥伴總結的這三個日誌還不錯,趕緊拿來和各位小夥伴分享。

日誌是mysql資料庫的重要組成部分,記錄著資料庫運作期間各種狀態資訊。 mysql日誌主要包括錯誤日誌、查詢日誌、慢查詢日誌、交易日誌、二進位日誌幾大類。

作為開發,我們重點需要關注的是二進位日誌(binlog)和交易日誌(包括redo logundo log),本文接下來會詳細介紹這三種日誌。

bin log

binlog用於記錄資料庫執行的寫入性操作(不包括查詢)信息,以二進位的形式保存在磁碟中。 binlogmysql的邏輯日誌,並且由Server層進行記錄,使用任何儲存引擎的mysql資料庫都會記錄 binlog日誌。

  • 邏輯日誌:可以理解為記錄的就是sql語句.

  • #物理日誌:mysql資料最終是保存在資料頁中的,實體日誌記錄的就是資料頁變更。

binlog是透過追加的方式進行寫入的,可以透過max_binlog_size參數設定每個binlog文件的大小,當檔案大小達到給定值之後,會產生新的檔案來保存日誌。

在實際應用中,binlog的主要使用場景有兩個,分別是主從複製和資料恢復。

  • 主從複製:在Master#端開啟binlog,然後將binlog傳送到各個Slave 端,Slave端重播binlog因此達到主從資料一致。

  • 資料恢復:透過使用mysqlbinlog工具來恢復資料。

binlog刷盤時機

對於InnoDB儲存引擎而言,只有在交易提交時才會記錄biglog ,此時記錄還在記憶體中,那麼biglog是什麼時候刷到磁碟中的呢?

mysql透過sync_binlog參數控制biglog的刷盤時機,取值範圍是0-N

  • 0:不強制要求,由系統自行判斷何時寫入磁碟;

  • 1:每次commit的時候都要將binlog寫入磁碟;

  • N:每N個事務,才會將binlog寫入磁碟。

從上面可以看出,sync_binlog最安全的是設定是1,這也是MySQL 5.7.7之後版本的預設值。但是設定一個大一些的值可以提升資料庫效能,因此實際情況下也可以將值適當調大,犧牲一定的一致性來獲得更好的效能。

binlog日誌格式

binlog日誌有三種格式,分別為STATMENTROWMIXED

MySQL 5.7.7之前,預設的格式是STATEMENTMySQL 5.7.7之後,預設值是ROW 。日誌格式透過binlog-format指定。

  • STATMENT:基於SQL 語句的複製( statement-based replication, SBR# ),每一條都會修改資料的sql語句會記錄到binlog 中 。

  • ROW:基於行的複製(row-based replication, RBR

    #ROW
  • :基於行的複製(
  • row-based replication, RBR

     ),不記錄每個sql語句的上下文訊息,僅需記錄哪一條數據被修改了。 MIXED:基於STATMENT 與 ROW 兩種模式的混合複製(mixed-based replication , MBR ),一般的複製使用STATEMENT# 模式保存 binlog ,對於 STATEMENT 模式無法複製的操作使用 

    ROW
  •  #STATEMENT
 模式無法複製的操作使用 

ROW

 模式模式保存 

binlog

redo log為什麼需要redo log

我們都知道,事務的四大特性裡面有一個是持久性,具體來說就是只要交易提交成功,那麼對資料庫做的修改就被永久保存下來了,不可能因為任何原因再回到原來的狀態。 ######那麼###mysql###是如何保證一致性的呢? ######簡單的方法是在每次提交事務時,將涉及修改的所有資料頁刷新到磁碟中。但這麼做會有嚴重的效能問題,主要體現在兩個方面:###
  • 因為Innodb是以為單位進行磁碟互動的,而一個交易很可能只修改一個資料頁裡面的幾個字節,這時候將完整的資料頁刷到磁碟的話,太浪費資源了!

  • 一個交易可能涉及修改多個資料頁,並且這些資料頁在物理上並不連續,使用隨機IO寫入效能太差!

因此mysql設計了redo log,具體來說就是只記錄交易對資料頁做了哪些修改,這樣就能完美地解決效能問題了(相對而言文件更小並且是順序IO)。

redo log基本概念

redo log包含兩個部分:一個是記憶體中的日誌緩衝(redo log buffer),另一個是磁碟上的日誌檔案(redo logfile)。

mysql每執行一條DML語句,先將記錄寫入redo log buffer,後續某個時間點再一次將多筆操作記錄寫到redo log file。這種先寫日誌,再寫磁碟的技術就是MySQL
裡常說到的WAL(Write-Ahead Logging)技術。

在電腦作業系統中,用戶空間(user space)下的緩衝區資料一般情況下是無法直接寫入磁碟的,中間必須經過作業系統核心空間(kernel space)緩衝區(OS Buffer)。

因此,redo log buffer寫入redo logfile其實是先寫入OS Buffer,然後再透過系統呼叫# fsync()將其刷到redo log file
中,流程如下:

MySQL中binlog/redolog/undolog差別是什麼

##mysql支持三種將redo log buffer寫入redo log file的時機,可以透過innodb_flush_log_at_trx_commit參數配置,各參數值意義如下:

MySQL中binlog/redolog/undolog差別是什麼

MySQL中binlog/redolog/undolog差別是什麼

redo log記錄形式

前面說過,

redo log實際上記錄資料頁的變更,而這種變更記錄是沒必要全部保存,因此redo log實作上採用了大小固定,循環寫入的方式,當寫到結尾時,會回到開頭循環寫日誌。如下圖:

MySQL中binlog/redolog/undolog差別是什麼

同時我們很容易得知, 在innodb中,既有

redo log需要刷盤,還有資料頁也需要刷盤,redo log存在的意義主要就是降低對資料頁刷盤的要求** 。

在上圖中,

write pos表示redo log目前記錄的LSN(邏輯序號)位置,check point 表示資料頁變更記錄刷盤後對應redo log所處的LSN(邏輯序號)位置。

write poscheck point之間的部分是redo log空著的部分,用來記錄新的記錄;check pointwrite pos之間是redo log待落盤的資料頁變更記錄。當write pos追上check point時,會先推check point向前移動,空出位置再記錄新的日誌。

啟動

innodb的時候,不管上次是正常關閉還是例外關閉,總是會進行復原操作。因為redo log記錄的是資料頁的物理變化,因此恢復的時候速度比邏輯日誌(如binlog)要快很多。

重啟

innodb時,首先會檢查磁碟中資料頁的LSN,如果資料頁的LSN小於日誌中的 LSN,則會從checkpoint開始恢復。

還有一種情況,在宕機前正處於

checkpoint的刷盤過程,且資料頁的刷盤進度超過了日誌頁的刷盤進度,此時會出現數據頁中記錄的LSN大於日誌中的LSN,這時超出日誌進度的部分將不會重做,因為這本身就表示已經做過的事情,無需再重做。

redo log與binlog區別

MySQL中binlog/redolog/undolog差別是什麼

binlogredo log的差異可知: binlog日誌只用於歸檔,只依賴binlog是沒有crash-safe能力的。

但只有redo log也不行,因為redo logInnoDB特有的,且日誌上的記錄落盤後會被覆寫掉。因此需要binlogredo log二者同時記錄,才能確保當資料庫發生宕機重新啟動時,資料不會遺失。

undo log

資料庫事務四大特性中有一個是原子性,具體來說就是原子性是指對資料庫的一系列操作,要麼全部成功,要麼全部失敗,不可能出現部分成功的情況。

實際上,原子性底層就是透過undo log來實現的。 undo log主要記錄了資料的邏輯變化,例如一條INSERT語句,對應一條DELETEundo log,對於每個UPDATE語句,對應一條相反的UPDATEundo log,這樣在發生錯誤時,就能回滾到交易之前的資料狀態。

同時,undo log也是MVCC(多重版本並發控制)實現的關鍵。

以上是MySQL中binlog/redolog/undolog差別是什麼的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:亿速云。如有侵權,請聯絡admin@php.cn刪除
图文详解mysql架构原理图文详解mysql架构原理May 17, 2022 pm 05:54 PM

本篇文章给大家带来了关于mysql的相关知识,其中主要介绍了关于架构原理的相关内容,MySQL Server架构自顶向下大致可以分网络连接层、服务层、存储引擎层和系统文件层,下面一起来看一下,希望对大家有帮助。

mysql的msi与zip版本有什么区别mysql的msi与zip版本有什么区别May 16, 2022 pm 04:33 PM

mysql的msi与zip版本的区别:1、zip包含的安装程序是一种主动安装,而msi包含的是被installer所用的安装文件以提交请求的方式安装;2、zip是一种数据压缩和文档存储的文件格式,msi是微软格式的安装包。

mysql怎么去掉第一个字符mysql怎么去掉第一个字符May 19, 2022 am 10:21 AM

方法:1、利用right函数,语法为“update 表名 set 指定字段 = right(指定字段, length(指定字段)-1)...”;2、利用substring函数,语法为“select substring(指定字段,2)..”。

mysql怎么替换换行符mysql怎么替换换行符Apr 18, 2022 pm 03:14 PM

在mysql中,可以利用char()和REPLACE()函数来替换换行符;REPLACE()函数可以用新字符串替换列中的换行符,而换行符可使用“char(13)”来表示,语法为“replace(字段名,char(13),'新字符串') ”。

mysql怎么将varchar转换为int类型mysql怎么将varchar转换为int类型May 12, 2022 pm 04:51 PM

转换方法:1、利用cast函数,语法“select * from 表名 order by cast(字段名 as SIGNED)”;2、利用“select * from 表名 order by CONVERT(字段名,SIGNED)”语句。

MySQL复制技术之异步复制和半同步复制MySQL复制技术之异步复制和半同步复制Apr 25, 2022 pm 07:21 PM

本篇文章给大家带来了关于mysql的相关知识,其中主要介绍了关于MySQL复制技术的相关问题,包括了异步复制、半同步复制等等内容,下面一起来看一下,希望对大家有帮助。

mysql怎么判断是否是数字类型mysql怎么判断是否是数字类型May 16, 2022 am 10:09 AM

在mysql中,可以利用REGEXP运算符判断数据是否是数字类型,语法为“String REGEXP '[^0-9.]'”;该运算符是正则表达式的缩写,若数据字符中含有数字时,返回的结果是true,反之返回的结果是false。

带你把MySQL索引吃透了带你把MySQL索引吃透了Apr 22, 2022 am 11:48 AM

本篇文章给大家带来了关于mysql的相关知识,其中主要介绍了mysql高级篇的一些问题,包括了索引是什么、索引底层实现等等问题,下面一起来看一下,希望对大家有帮助。

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

SecLists

SecLists

SecLists是最終安全測試人員的伙伴。它是一個包含各種類型清單的集合,這些清單在安全評估過程中經常使用,而且都在一個地方。 SecLists透過方便地提供安全測試人員可能需要的所有列表,幫助提高安全測試的效率和生產力。清單類型包括使用者名稱、密碼、URL、模糊測試有效載荷、敏感資料模式、Web shell等等。測試人員只需將此儲存庫拉到新的測試機上,他就可以存取所需的每種類型的清單。

EditPlus 中文破解版

EditPlus 中文破解版

體積小,語法高亮,不支援程式碼提示功能

SAP NetWeaver Server Adapter for Eclipse

SAP NetWeaver Server Adapter for Eclipse

將Eclipse與SAP NetWeaver應用伺服器整合。

Atom編輯器mac版下載

Atom編輯器mac版下載

最受歡迎的的開源編輯器

PhpStorm Mac 版本

PhpStorm Mac 版本

最新(2018.2.1 )專業的PHP整合開發工具