[MySQL データベース] 第 1 章の解釈: MySQL のアーキテクチャと歴史

前書き:

この章では、MySQL サーバー アーキテクチャ、さまざまなストレージ エンジン間の主な違い、およびその違いの重要性について簡単に説明します

MySQL の歴史的背景とベンチマークを確認し、簡略化した詳細とデモを通じて MySQL の原理について説明します事例

本文 :

MySQL アーキテクチャはさまざまなシナリオに適用でき、データ ウェアハウス、コンテンツ インデックス、展開ソフトウェア、高可用性冗長システム、オンライン トランザクション処理システムなどをサポートするアプリケーション プログラムに埋め込むことができます。

MySQL の最も重要な機能

1.1 MySQL 論理アーキテクチャ

1.2 同時実行制御

ロック粒度:

ロック戦略: ロックのオーバーヘッドとデータ セキュリティのバランスをとり、各ストレージ エンジンは指定されたロック戦略と粒度を実装できます

テーブル ロック: テーブル ロック テーブル全体をロックするための最も基本的で最小限のオーバーヘッド

行レベルのロック: 行ロック 最大同時実行性のサポート 最大のロック オーバーヘッドはストレージにあります エンジン層は (独自の方法で)

1.3 トランザクション

独立した作業単位、アトミックな SQL クエリのセット

分離レベル:

4 つ、それぞれ変更を規定しますトランザクション内で行われるため、分離性が低くなり、より高い同時実行性とより低いオーバーヘッドを実行できます

READ UNCOMMITTED アンコミット読み取り

トランザクション内の変更は時間内にコミットされず、トランザクションはコミットされていないデータを読み取ります: ダーティ。 read; 非常に使用量が少ない

READ COMMITTED

ほぼ トランザクションの最初から最後まで、非 MySQL のデフォルトの分離レベル。送信されたトランザクションによって行われた変更のみが表示されます。自身による変更は他のトランザクションには表示されません。 Non-repeatable Read : 同じクエリを 2 回実行すると、結果が異なる場合があります (他のトランザクションの変更)

REPEATABLE READ 繰り返し可能な読み取り

お読みください : いつトランザクションが特定の範囲内のレコードを読み取り、別のトランザクションがその範囲内の新しい レコードを挿入し、現在のトランザクションがその範囲内のレコードを再度読み取る、ファントム行

SERIALIZABLE: Serializable

を最高に最適化、強制トランザクションはシリアルに実行され、ファントム読み取りの問題を回避し、読み取り時にデータの各行をロックします (大量のタイムアウトとロック競合が発生する可能性があります)。めったに使用されません

デッドロック

1、2 つの複数のトランザクションが、

2. 複数のトランザクションが異なる順序でリソースをロックしようとすると、同じリソースが同時にロックされます。

ロックの動作と順序は、ステートメントの実行順序と同じで、デッドロックを生成するストレージ エンジンと生成しないストレージ エンジンがあります。

デッドロックの二重の理由: 実際のデータの競合 (ハード回避)。ストレージ エンジンの実装により、デッドロックが送信された後は、トランザクションの 1 つを部分的または完全にロールバックすることによってのみデッドロックを解消できます。InnoDB は、最も少ない行レベルの排他ロックを保持しているトランザクションをロールバックします。

1.3 .4 MySQL のトランザクション: ストレージ エンジンの実装

MySQL には、InnoDB、NDB Cluster の 2 つのトランザクション ストレージ エンジンがあります。

自動送信 AUTOCOMMIT

トランザクションを明示的に開始しない場合、デフォルトは自動送信モードです。コミット操作を実行するトランザクションとみなされます。これは、AUTOCOMMIT 変数 =1 =ON で有効にでき、無効にできます =0 =OFF (トランザクションが終了して新しいトランザクションが開始されるまで、すべてのクエリは 1 つのトランザクション内にあります)。トランザクションは同時に開始されます。この変数を非トランザクション テーブルに変更すると、影響はありません。MySQL は、トランザクション分離レベルの設定を通じて分離レベルを設定できます。新しいレベルは、次のトランザクションの開始時に有効になります。ライブラリ全体、または現在のセッションの分離レベルのみを変更できます

set session transaction isolation level read committed;

提案: どのようなストレージ エンジンが使用されているかに関係なく、常に LOCK TABLES を明示的に実行しないでください

1.4 マルチバージョン同時実行制御 MVCC

データベース MySQL 、Oracle、postgresql などはすべて MVCC を実装しており、それぞれの実装メカニズムは異なります [出典]

MVCC: データベースに接続されている各リーダーは、ある瞬間にデータベースの

スナップショット

を参照しますが、書き込み操作は行われません。送信される前に外部に公開されます。 [ソース]

更新するときは、古いデータを古いものとしてマークし、新しいバージョンのデータ (複数のバージョンのデータ、1 つだけが最新) を追加し、以前のデータの読み取りを許可します。

特徴:

1. データの各行にはバージョンがあり、このバージョンはデータが更新されるたびに更新されます。

2. 変更する場合は、現在のバージョンをコピーして、それぞれを妨げることなく自由に変更します。取引

3、保存时比较版本号，成功commit则覆盖原纪录，失败则放弃rollback

4、只在REPEATABLE READ 和READ COMMITTED两个隔离级别下工作

1.5MySQL存储引擎

     mysql将每个数据库保存位数据目录下的一个子目录，创建表示，mysql在子目录下创建与表同名的.frm文件保存表的定义，不同存储引擎保存数据和索引的方式不同，但表的定义在MySQL服务层同一处理；

InnoDB:默认事务型引擎、最重要、广泛使用

     处理大量短期事务；其性能和自动崩溃恢复特性、非事务型存储的需求中也很流行

     数据存储在由InnoDB管理的表空间中，由一系列数据文件组成；

     使用MVCC支持高并发，并实现了四个标准的隔离级别，默认是REPEATABLE READ可重复读，通过间隙锁next-key locking防止幻读，间隙锁使得InnoDB锁定查询设计的行还锁定索引中的间隙防止唤影行；

间隙锁：

  当使用范围条件并请求锁时，InnoDB给符合条件的已有数据记录的索引项加锁，对应键值在条件范围内但是不存在的记录（间隙）加锁，间隙锁:【源】

//如emp表中有101条记录，其empid的值分别是 1,2,...,100,101
Select * from  emp where empid > 100 for update;

    InnoDB对符合条件的empid值为101的记录加锁，也会对empid大于101（这些记录并不存在）的“间隙”加锁；

      1、上面的例子，如果不使用间隙锁，如果其他事务插入大于100的记录，本事务再次执行则幻读，但是会造成锁等待，在并发插入比较多时、要尽量优化业务逻辑，使用相等条件来访问更新数据，避免使用范围条件；

      2、 在使用相等条件请求给一个不存在的记录加锁时，也会使用间隙锁，当我们通过参数删除一条记录时，如果参数在数据库中不存在，库会扫描索引，发现不存在，delete语句获得一个间隙锁，库向左扫描扫到第一个比给定参数小的值，向右扫描到第一个比给定参数大的值，构建一个区间，锁住整个区间内数据；【源】

1.5.2MyIsSAM存储引擎

   全文索引、压缩、空间函数，不支持事务和行级锁，崩溃后无法安全恢复

存储：

    将表存储在两个文件中：数据.MYD、索引文件.MYI

    表可以包含动态或静态（长度固定）行，MySQL据表定义来决定采用何种行格式

    表如是变长行，默认配置只能处理256TB数据（指向记录的指针长度6字节），改变表指针长度，修改表的MAX_ROWS和AVG_ROW_LENGTH，两者相乘=表可到达的max大小，修改会导致重建整个表、表all索引；

特性：

    1、对整张表加锁，读、共享锁，写、排他锁，但在读的同时可从表中插入新记录：并发插入

    2、修复：可手工、自动执行检查和修复操作，CHECK TABLE mytable检查表错误，REPAIR TABLE mytable进行修复，执行修复可能会丢失些数据，如果服务器关闭，myisamchk命令行根据检查和修复操作；

    3、索引特性：支持全文索引，基于分词创建的索引，支持复杂查询

    4、延迟更新索引键Delayed Key Write,如果指定了DELAY_KEY_WRITE选项，每次修改完，不会立即将修改的索引数据写入磁盘，写入到内存的键缓冲区，清理此区或关闭表时将对应的索引块写入到磁盘，提升写性能，但是在库或主机崩溃时造成索引损坏、需要执行修复操作

压缩表：

    表在创建并导入数据后，不再修改，比较适合，可使用myisampack对MyISAM表压缩（打包），压缩表不能修改（除非先解除压缩、修改数据、再次压缩）；减少磁盘空间占用、磁盘IO，提升查询性能，也支持只读索引；

    现在的硬件能力，读取压缩表数据时解压的开销不大，减少IO带来的好处大得多，压缩时表记录独立压缩，读取单行时不需要解压整个表

性能：

   设计简单，紧密格式存储；典型的性能问题是表锁的问题，长期处于locked状态：找表锁

1.5.3内建的其他存储引擎

Archive：适合日志和数据采集类应用，针对高速插入和压缩优化，支持行级锁和专业缓存区，缓存写利用zlib压缩插入的行，select扫描全表；

Blackhole：复制架构和日志审核，其服务器记录blackhole表日志，可复制数据到备库 日志；

CSV：数据交换机制，将CSV文件作为MySQL表来处理，不支持索引；

Federated：访问其他MySQL服务器的代理，创建远程mysql的客户端连接将查询传输到远程服务器执行，提取发送需要的数据，默认禁用；

Memory：快速访问不会被修改的数据，数据保存在内存、不IO，表结构重启后还在但数据没了

     1、查找 或 映射 表 ，2、缓存周期性聚合数据， 3、保存数据分析中产生的中间数据

     支持hash索引，表级锁，查找快并发写入性能低，不支持BLOB/TEXT类型的列，每行长度固定，内存浪费

Merge：myisam变种，多个myisam合并的虚拟表

NDB集群引擎：

1.5.4第三方存储引擎

OLTP类:

XtraDB基于InnoDB改进，性能、可测量性、操作灵活

PBXT：ACID/MVCC，引擎级别的复制、外键约束，较复杂架构对固态存储SSD适当支持，较大值类型BLOB优化

TokuDB：大数据，高压缩比，大数据量创大量索引

RethinkDB:固态存储

面向列的

列单独存储，压缩效率高

Infobright：大数据量，数据分析、仓库应用设计的，高度压缩，按照块（一组元数据）排序；块结构准索引，不支持索引（量大索引也没用），如查询无法再存储层使用面向列的模式执行，则需要在服务器层转换成按行处理

社区存储引擎：***

1.5.5选择合适的引擎

 除非需要用到某些InnoDB不具备的特性，且无办法可以替代，否则优先选择InnoDB引擎

不要混合使用多种存储引擎，如果需要不同的存储引擎：

1、事务：需要事务支出，InnoDB XtraDB；不需要 主要是select insert 那MyISAM

2、备份：定期关闭服务器来执行备份，该因素可忽略；在线热备份，InnoDB

3、崩溃恢复：数据量较大，MyISAM崩后损坏概率比InnoDB高很多、恢复速度慢

4、持有的特性：

1.5.6转换表的引擎

ALTER TABLE:最简单

ALTER TABLE mytable ENGINE=InnoDB

此会执行很长时间，MySQL按行将数据从原表复制到新表中，在复制期间可能会消耗掉系统all的I/O能力，同时原表上加读锁；会失去和原引擎相关的all特性

导出与导入：

mysqldump工具将数据导出到文件，修改文件中CREATE_TABLE语句的存储引擎选项，同时修改表名（同一个库不能存在相同的表名），mysqldump默认会自动在CREATE_TABLE语句前加上DROP TABLE语句

创建与查询：CREATE SELECT 

综合上述两种方法：先建新存储引擎表，利用INSERT……SELECT语法导数

CREATE TABLE innodb_table LIKE myisam_table
ALTER TABLE innodb_table ENGINE=InnoDB;
INSERT INTO innodb_table SELECT * FROM myisam_table;
数据量大的话，分批处理（放事务中）

1.6MySQL时间线Timeline

 早期MySQL破坏性创新，有诸多限制，且很多功能只能说是二流的，但特性支持和较低的使用成本，使受欢迎；5.x早起引入视图、存储过程等，期望成为“企业级”数据库，但不算成功，5.5显著改善

1.7MySQL开发模式

遵循GPL开源协议，全部源代码开发给社区，部分插件收费；

1.8总结

mysql分层架构，上层是服务器层的访问和查询执行引擎，下层存储引擎（最重要）

相关文章：

【MySQL数据库】第二章解读：MySQL基准测试

【MySQL数据库】第三章解读：服务器性能剖析（上）

以上が[MySQL データベース] 第 1 章の解釈: MySQL のアーキテクチャと歴史の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。