Maison > Article > base de données > Basé sur la base de données MySQL, parlez de l'exploitation et de la maintenance de la haute disponibilité MySQL
Basé sur la base de données MySQL, parlez de l'exploitation et de la maintenance de la haute disponibilité MySQL
- php是最好的语言original
- 2018-07-25 15:52:281838parcourir
Cet article présentera une autre solution d'implémentation haute disponibilité pour MySQL, à savoir : MHA (Master Hautement disponible). Maître H.A. Il s'agit d'un programme open source à haute disponibilité qui fournit une fonction de récupération automatique des pannes pour l'architecture maître-esclave de MySQL.
1. Introduction aux connaissances de base
1. Définition MHA
Maître HA. Il s'agit d'un programme open source à haute disponibilité qui fournit une fonction de récupération automatique des pannes pour l'architecture maître-esclave de MySQL. Lors de la réplication maître-esclave, lorsque MHA détecte une défaillance du nœud maître MySQL, il promouvra automatiquement un nœud esclave dans le cluster de réplication pour devenir le nouveau nœud maître. Lors du basculement, les problèmes de cohérence des données sont également évités en obtenant des informations supplémentaires auprès d'autres nœuds. De plus, MHA fournit également une fonction de basculement en ligne pour le nœud maître, qui peut changer de nœud maître/esclave selon les besoins.
2. Structure MHA
Tous les nœuds dans MHA ont principalement deux rôles, à savoir : nœud de gestion et nœud de données.
Nœud de gestion (MHA Manager) : Généralement déployé sur une seule machine, il permet de gérer plusieurs clusters maître et esclave, et chaque cluster composé de maître et d'esclave est appelé une application.
Data Node (MHA Node) : s'exécute sur chaque serveur MySQL et accélère le basculement du nœud en surveillant les scripts avec la fonction d'analyse et de nettoyage des journaux.
3. Composant HMA
(1) Composant Manager
masterha_check_sh：MHA依赖的ssh环境监测工具 masterha_check_repl：MySQL复制环境监测工具 masterha_manager：MHA服务主程序 masterha_check_status：MHA运行状态探测工具 masterha_master_monitor：MySQL master节点可用性监测工具 masterha_master_switch：master节点切换工具 masterha_conf_host：添加或删除配置的节点 masterha_stop：关闭MHA服务的工具
(2) Composant nœud
save_binary_logs：保存和赋值master的二进制日志 apply_diff_relay_logs：识别差异的中继日志并应用于其他slave filter_mysqlbinlog：去除不必要的ROLLBACK事件（MHA已经不再使用这个工具） purge_relay_logs：清除中继日志（不会阻塞SQL线程）
(3) Extension personnalisée
secondary_check_script：通过多条网络路由监测master的可用性 master_ip_failover_script：更新application使用的masterip shutdown_script：强制关闭master节点 report_script：发送报告 init_conf_load_script：加载初始配置参数 master_ip_online_change_script：更新master节点ip地址
2. Construction MHA
1. Préparation de l'environnement
Système d'exploitation : CentOS6.9_X86_64
Version MySQL : MySQL5.6.39 binaire universel
Planification du serveur :
Nœud maître Maître : 192.168.199.104 (mysql-master, master)
Nœud esclave 1 : 192.168.199.105 (mysql-slave01, slave01)
Nœud esclave 2 : 192.168.199.106 (mysql-slave02, slave02)
Nœud de gestion : 192.168.199.107 (mysql-manager, manager)
2. Configurer
(1) Configurer l'hôte de chaque nœud Il sera plus pratique à utiliser plus tard, sans avoir à le faire IP manuscrite secondaire
[root@mysql-master ~]# vim /etc/hosts #添加如下内容： 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 192.168.199.104 mysql-master master 192.168.199.105 mysql-slave01 slave01 192.168.199.106 mysql-slave02 slave02 192.168.199.107 mysql-manager manager
(2) Copiez le fichier hôte configuré sur les trois autres nœuds
[root@mysql-master ~]# scp /etc/hosts slave01:/etc/ [root@mysql-master ~]# scp /etc/hosts slave02:/etc/ [root@mysql-master ~]# scp /etc/hosts manager:/etc/
(3) Configurez la synchronisation maître-esclave, slave01 et slave02 sont masters Depuis la bibliothèque esclave
Activer le journal binaire du maître
[root@mysql-master ~]# vim /etc/my.cnf #在[mysqld]下面添加如下内容： server-id = 104 skip-name-resolve log_bin=/mysql_data/mysql-bin log_bin_index=/mysql_data/mysql-bin.index binlog_format = mixed
Afficher l'emplacement actuel du point de journal binaire sur le maître et créer un compte de réplication
[root@mysql-master ~]# mysql -uroot –proot
#查看当前二进制日志点的位置
mysql> SHOW MASTER STATUS \G
*************************** 1. row ***************************
File: mysql-bin.000090
Position: 120
Binlog_Do_DB:
Binlog_Ignore_DB:
Executed_Gtid_Set:
1 row in set (0.00 sec)
#创建从库的复制账户
mysql> GRANT REPLICATION SLAVE ,REPLICATION CLIENT ON *.* TO 'repl'@'192.168.199.%' IDENTIFIED BY 'repl';
#刷新权限
mysql> FLUSH PRIVILEGES;Activer le connectez-vous binairement aux journaux slave01 et relais, et configurez-le comme bibliothèque esclave du maître
[root@mysql-slave01 ~]# vim /etc/my.cnf #在[mysqld]下添加如下内容： server-id = 105 log_bin = /mysql_data/mysql-bin log_bin_index = /mysql_data/mysql-bin.index relay_log = /mysql_data/mysql-relay relay_log_index = /mysql_data/mysql-relay.index read_only relay_log_purge = 0
Explication du paramètre :
relay_log_purge:该参数表示不自动清理中继日志，因为MHA需要根据slave的中继日志判断slave同步master的binlog到什么位置了 read_only:表示是只读，MHA需要根据这个参数来识别主从库 bin_log:开启从库的二进制日志，因为在主节点出现故障时，需要将其中某个从库提升为主库，所以需要开启从库的二进制日志
Démarrez le nœud slave01 et pointez les informations du nœud maître qui doit être synchronisé avec le nœud maître :
[root@mysql-slave01 ~]# service mysqld restart [root@mysql-slave01 ~]# mysql -uroot –proot #使用change master命令将主库指向master节点 mysql> CHANGE MASTER TO MASTER_HOST = '192.168.199.104',MASTER_PORT=3306,MASTER_USER='repl',MASTER_PASSWORD='repl',MASTER_LOG_FILE='mysql-bin.000090',MASTER_LOG_POS=120; mysql> START SLAVE; #查看是否同步成功 mysql> SHOW SLAVE STATUS \G 看到如下信息表示同步成功： Slave_IO_Running: Yes Slave_SQL_Running: Yes
Configurez le deuxième esclave de la même manière. Vous pouvez directement copier le fichier de configuration sur slave01 sur le deuxième esclave puis le modifier.
[root@mysql-slave01 ~]# scp /etc/my.cnf slave02:/etc/ [root@mysql-slave02 ~]# vim /etc/my.cnf #修改server-id即可： server-id = 106
Une fois la modification terminée, enregistrez et quittez, redémarrez MySQL, puis configurez slave02 comme bibliothèque esclave du maître
[root@mysql-slave02 ~]# mysql -uroot –proot mysql> CHANGE MASTER TO MASTER_HOST = '192.168.199.104',MASTER_PORT=3306,MASTER_USER='repl',MASTER_PASSWORD='repl',MASTER_LOG_FILE='mysql-bin.000090',MASTER_LOG_POS=120; mysql> START SLAVE; #查看是否同步成功 mysql> SHOW SLAVE STATUS \G 看到如下信息表示同步成功： Slave_IO_Running: Yes Slave_SQL_Running: Yes
(4) Créez un compte utilisateur avec des droits d'administrateur
#在主节点master上创建管理账号，使其可以同步到其他连个从节点，注意：这个管理账号需要能够远程连接MySQL mysql> GRANT ALL ON *.* TO 'mha'@'192.168.199.%' IDENTIFIED BY 'mha'; mysql> FLUSH PRIVILEGES;
(5) Étant donné que l'architecture MHA nécessite une communication de confiance mutuelle entre chaque nœud, il est nécessaire de configurer chaque nœud pour se connecter sans clé secrète. Puisqu'il existe de nombreux nœuds, il est difficile à générer. et copiez chacun d'eux. Vous pouvez générer une paire de clés secrètes sur le nœud maître, puis laisser chaque hôte avoir la même clé privée
#在master上生成秘钥对 [root@mysql-master ~]# ssh-keygen -t rsa -P '' #首先保存到本机的秘钥文件中，使得本机可以无秘钥使用ssh方式登陆本机 [root@mysql-master ~]# cat .ssh/id_rsa.pub >> .ssh/authorized_keys #使用ssh登陆本机测试，发现可以无密码登陆 [root@mysql-master ~]# ssh 192.168.199.104 #修改authorized_keys文件的权限，只能属主查看，同组用户和其他用户不可查看 [root@mysql-master ~]# chmod go= .ssh/authorized_keys
Copiez la paire de clés secrètes et les fichiers de clés privées sur les trois autres nœuds. . Remarque : assurez-vous qu'il s'agit d'autorisations originales
[root@mysql-master ~]# scp -p .ssh/id_rsa .ssh/authorized_keys slave01:/root/.ssh/ [root@mysql-master ~]# scp -p .ssh/id_rsa .ssh/authorized_keys slave02:/root/.ssh/ [root@mysql-master ~]# scp -p .ssh/id_rsa .ssh/authorized_keys manager:/root/.ssh/ #测试无密码登陆，在主节点上执行如下命令，查看slave01节点的ip地址 [root@mysql-master ~]# ssh slave01 'ifconfig eth0' #能够查看到slave01的ip地址表示无秘钥登陆配置成功，其他俩节点可以自己验证
(6) Téléchargez les packages d'installation mha4mysql-manager et mha4mysql-node
Les versions de package utilisées ici sont les suivantes :
管理节点：mha4mysql-manager-0.56.tar.gz 数据节点：mha4mysql-node-0.56.tar.gz
(7) Configurez epel , car certains packages mha4mysql proviennent de base et certains packages proviennent d'epel
[root@mysql-master ~]# rpm –ivh http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.noarch.rpm
(8) Décompressez et utilisez la commande perl pour exécuter le script Makefile.PL
[root@mysql-master ~]# tar xf mha4mysql-manager-0.56.tar.gz [root@mysql-master ~]# cd mha4mysql-manager-0.56 [root@mysql-master mha4mysql-manager-0.56]# perl Makefile.PL
Remarque : Lors de l'exécution de Makefile.PL, si une erreur similaire à la suivante se produit, vous devez installer les fichiers de bibliothèque dont dépend le programme Perl :
Can't locate ExtUtils/MakeMaker.pm in @INC (@INC contains: inc /usr/local/lib64/perl5 /usr/local/share/perl5 /usr/lib64/perl5/vendor_perl /usr/share/perl5/vendor_perl /usr/lib64/perl5 /usr/share/perl5 .) at inc/Module/Install/Makefile.pm line 4. BEGIN failed--compilation aborted at inc/Module/Install/Makefile.pm line 4
Si l'erreur ci-dessus se produit, vous devez installer les dépendances :
[root@mysql-master ~]# yum install perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker cpan perl-Time-HiRes perl-DBI perl-DBD-MySQL
(9) Après vous être assuré que "perl MakeFile.PL" est exécuté correctement, utilisez la commande make pour terminer l'installation . Remarque : Vous pouvez utiliser "echo $?" pour afficher le résultat de l'exécution de cette commande afin de déterminer si la commande précédente a été exécutée correctement. Habituellement, 0 signifie que c'est fait correctement.
[root@mysql-master mha4mysql-manager-0.56]# make [root@mysql-master mha4mysql-manager-0.56]# make install
(10) Une fois l'installation du gestionnaire sur le maître terminée, compilez et installez mha4mysql-node de la même manière
[root@mysql-manager ~]# tar xf mha4mysql-node-0.56.tar.gz [root@mysql-manager ~]# cd mha4mysql-node-0.56 [root@mysql-manager mha4mysql-node-0.56]# perl Makefile.PL #判断Makefile.PL是否正常执行完成 [root@mysql-manager mha4mysql-node-0.56]# echo $? 0 [root@mysql-manager mha4mysql-node-0.56]# make && make install
(11) Sur les trois autres serveurs ( master, Install mha4mysql-node
[root@mysql-slave01 ~]# tar mha4mysql-node-0.56.tar.gz [root@mysql-slave01 ~]# cd mha4mysql-node-0.56 [root@mysql-slave01 mha4mysql-node-0.56]# perl Makefile.PL [root@mysql-slave01 mha4mysql-node-0.56]# make && make install
sur slave01, slave02). Les deux autres nœuds sont installés de la même manière, ce qui est omis ici.
(12) L'installation est terminée. Vous pouvez voir qu'il y a des scripts sous /usr/local/bin, qui sont des fichiers de script générés par mha4mysql
(13) Initialiser MHA
Modifier mha Il existe deux principaux types de fichiers de configuration :
configuration globale : fournit la configuration par défaut pour chaque application
configuration d'application : utilisée pour spécifier quels serveurs
#创建目录并编辑配置文件 [root@mysql-manager ~]# mkdir -pv /etc/masterha/ [root@mysql-manager ~]# vim /etc/masterha/app01.conf
Écrire le contenu suivant :
[server default] user=mha #管理用户的用户名 password=mha #管理用户密码 manager_workdir=/data/masterha/app01 #manager节点的工作目录，用来存放一些二进制日志，不存在会自动创建 manager_log=/data/masterha/app01/manager.log #日志文件位置 remote_workdir=/data/masterha/app01 #远程的每一个节点的工作目录，没有会自动生成 ssh_user=root #需要使用ssh来完成一些管理操作 repl_user=repl #拥有复制权限的用户名 repl_password=repl #拥有复制权限的密码 ping_interval=1 #每隔多长时间监测一次主节点是否在线，心跳信息监测 #其他主机 [server1] hostname=192.168.199.104 #ssh_port=3306 #如果MySQL没有使用默认端口号，则此处需要指定，使用默认端口不需要指定 candidate_master=1 #表示该节点是否在主节点故障之后参与成为主节点 master_binlog_dir=/mysql_data/ #指定mysql的binlog日志路径 [server2] hostname=192.168.199.105 candidate_master=1 master_binlog_dir=/mysql_data/ [server3] hostname=192.168.199.106 #no_master=1 #表示主节点故障之后，该节点不参与成为主节点 master_binlog_dir=/mysql_data/
(14) Vérifiez si la communication entre chaque nœud est normale
[root@mysql-manager ~]# masterha_check_ssh --conf=/etc/masterha/app01.conf
Erreur 1 : Impossible de localiser Config/Tiny.pm dans @INC (@ INC contient : , vous pouvez télécharger les packages RPM requis à partir de
http://rpmfind.net/. Les packages RPM suivants sont pour CentOS6.9 X86_64 :
Une fois le téléchargement terminé terminé, utilisez la commande yum. Installez-la simplement, car cela peut dépendre d'autres packages
错误2：master_check_ssh执行中的错误：
Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
原因：/root/.ssh/下的文件内容不一样或者文件的权限有问题，我遇到的是文件内容有问题。
解决办法：重新将其他主机上的秘钥对和私钥拷贝一份就正常了。
（15）检查主从复制环境是否正常
[root@mysql-manager ~]# masterha_check_repl --conf=/etc/masterha/app01.conf
错误1：
Sat Jun 2 03:07:26 2018 - [error][/usr/local/share/perl5/MHA/ServerManager.pm, ln301] install_driver(mysql) failed: Can't locate DBD/mysql.pm in @INC (@INC contains: /usr/local/lib64/perl5 /usr/local/share/perl5 /usr/lib64/perl5/vendor_perl /usr/share/perl5/vendor_perl /usr/lib64/perl5 /usr/share/perl5 .) at (eval 27) line 3. Perhaps the DBD::mysql perl module hasn't been fully installed, or perhaps the capitalisation of 'mysql' isn't right.
原因：缺少perl-DBD-MySQL依赖库
解决办法：
[root@mysql-manager ~]# yum install -y perl-DBD-MySQL*
错误2：
Sat Jun 2 03:11:06 2018 - [error][/usr/local/share/perl5/MHA/ServerManager.pm, ln188] There is no alive server. We can't do failover
错误3：
Failed to save binary log: Binlog not found from /var/lib/mysql,/var/log/mysql! If you got this error at MHA Manager, please set "master_binlog_dir=/path/to/binlog_directory_of_the_master
原因：mysql的binlog日志目录没有在默认的/var/log/mysql下，而是在其他地方，导致目录找不到。
解决办法：在manager节点的配置文件中每个节点下制定二进制日志的目录路径。
[server1] hostname=192.168.199.105 candidate_master=1 master_binlog_dir=/mysql_data/ #指定二进制日志文件目录
错误4：
Can't exec "mysqlbinlog": No such file or directory at /usr/local/share/perl5/MHA/BinlogManager.pm line 106. mysqlbinlog version command failed with rc 1:0, please verify PATH, LD_LIBRARY_PATH, and client options
原因：使用ssh连接之后找不到mysqlbinlog命令
解决办法：将/usr/local/mysql-5.6.39/目录连接到/usr/bin下
[root@mysql-master ~]# ln –s /usr/local/mysql-5.6.39/bin /usr/bin [root@mysql-slave01 ~]# ln –s /usr/local/mysql-5.6.39/bin /usr/bin [root@mysql-slave02 ~]# ln –s /usr/local/mysql-5.6.39/bin /usr/bin
（16）启动MHA
#前台启动，日志会直接打印在控制台上 [root@mysql-manager app01]# masterha_manager --conf=/etc/masterha/app01.conf #后台启动 [root@mysql-manager app01]# nohup masterha_manager --conf=/etc/masterha/app01.conf &
（17）验证高可用故障自动转移
#停止master节点的mysqld服务
[root@mysql-master ~]# killall mysqld mysqld_safe
#查看原来的两个slave节点信息，发现已经有slave01被提升为master了
mysql> SHOW SLAVE STATUS \G
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.199.105
Master_User: repl
...
#查看slave01的read_only属性，发现已经被修改为OFF了
mysql> SHOW VARIABLES LIKE 'read_only';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| read_only | OFF |
+---------------+-------+注意：当某一个master故障之后，从库提升为主库，原来的manager节点上的manager服务会自动退出。需要手动重启。
（18）故障的服务器再次恢复时，需要使用”CHANGE MASTER”命令手动将其加入到从节点中
（19）manager节点启动之后，可以使用masterha_check_status命令查看当前的主节点状态信息
[root@mysql-manager ~]# masterha_check_status --conf=/etc/masterha/app01.conf
app01 (pid:20582) is running(0:PING_OK), master:192.168.199.105MHA的其他用法，如在线主从切换等，可以自行参考官方文档，此处不再介绍。另外还有MHA的manager节点的自动重启功能，报警功能，故障主机彻底摘除功能等可以通过shell脚本实现，后面有时间会继续介绍。
至此，MySQL的MHA高可用基本功能搭建完成。整个过程中有无数的坑，可能读者在搭建过程中，还会遇到其他的深坑，最好能够硬着头皮一个一个去解决！篇幅较长，所有内容都是经过验证一个字一个字敲上去的，但也难免有笔误，如有错误，欢迎在下方评论指出！
相关推荐：
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!