MHA怎么排查由于SSH互信失效导致故障切换半途卡死中断

轻雪酱_7340

轻雪酱_7340

2026-10-28

358人浏览

原创

masterha_manager启动即退出,90%是SSH互信未通透:要求所有节点(含Manager自身、主库、各从库)两两免密互通,需逐台执行ssh -o ConnectTimeout=5 mysql@other_host date验证全部组合,并确认sudo NOPASSWD:/usr/bin/env权限及~/.bashrc无exit语句。

mha怎么排查由于ssh互信失效导致故障切换半途卡死中断

masterha_manager启动即退出,90%是SSH互信没跑通

这不是网络不通,而是MHA要求所有节点(包括Manager自身、主库、每个从库)之间两两SSH免密互通——它会在切换过程中调用scp拉取relay log、用mysqlbinlog解析binlog、甚至在从库A上ssh到从库B执行env。任一链路卡住,进程就静默退出。

别信masterha_check_ssh输出的“OK”:它只测了基础连通性,不校验sudo NOPASSWD:/usr/bin/env权限,也不管~/.bashrc里有没有exit语句。

  • 逐台登录每台MySQL节点,执行ssh -o ConnectTimeout=5 mysql@other_host date,覆盖所有组合:manager→master、manager→slave1、slave1→slave2、slave2→manager、甚至ssh localhost date
  • 非root用户(如mysql)运行时,确认/etc/sudoers含mysql ALL=(ALL) NOPASSWD: /usr/bin/env
  • 检查~/.ssh/authorized_keys权限是否为600、目录~/.ssh是否为700;SELinux启用时需setsebool -P ssh_sysadm_login on

save_binary_logs失败但日志只写“Could not save binary logs”

这表示MHA尝试在原主库上执行save_binary_logs --command=save时SSH失败,不是MySQL挂了,而是根本连不上。常见于原主库mysqld已死但sshd还活着,此时ssh mysql@old_master date能通,但ssh mysql@old_master 'mysqlbinlog ...'因环境变量缺失而失败——因为MHA依赖env获取PATH等变量。

Soundful
Soundful

Soundful是一款通过曲风模板快速生成原创免版税音乐的 AI 音乐平台。

下载
  • 手动模拟MHA行为:ssh mysql@old_master '/usr/bin/env mysqlbinlog --base64-output=decode-rows --verbose /var/lib/mysql/mysql-bin.000001 | head -20'
  • 若报command not found,说明env没返回正确PATH,检查sudo -u mysql /usr/bin/env输出,并确保/etc/sudoers中该用户有NOPASSWD执行env权限
  • 若报Permission denied (publickey),不是密钥问题,而是sshd_config里PermitRootLogin或PubkeyAuthentication被禁用

切换卡在“Waiting for shutdown of MySQL”后超时

这个阶段MHA正尝试SSH到原主库执行shutdown_script(如有配置)或直接mysqladmin shutdown。如果SSH连得上但命令不返回,大概率是shell卡在交互环节——比如~/.bashrc末尾有exit,导致非交互式ssh session立即终止,后续命令全丢弃。

  • 在所有节点检查~/.bashrc和~/.profile,删掉任何exit、return或read语句
  • 验证方式:ssh mysql@host 'echo hello; bash -c "echo world"',应输出hello和world;若只输出hello,说明shell提前退出
  • 强制禁用shell初始化:ssh -o RequestTTY=no -o StrictHostKeyChecking=no mysql@host 'mysqladmin -u root shutdown'

master_ip_failover脚本绑错VIP,新主没IP

MHA调用master_ip_failover不止一次:先以--command=stop通知旧主释放VIP,再以--command=start通知新主绑定VIP。脚本若没区分这两者,可能把VIP绑到宕机节点,或在新主上重复执行ip addr add失败却不报错。

  • 脚本开头必须有明确分支:if [ "$1" = "--command=start" ]; then才执行ip addr add 192.168.4.50/24 dev eth0
  • 别用ifconfig(已被废弃),且网卡名必须统一(不能有的用ens33,有的用eth0)
  • 手动测试:./master_ip_failover --command=start --new_master_host=192.168.4.90,然后立刻ip addr show eth0确认VIP出现

真实环境里最麻烦的从来不是某条命令写错,而是SSH互信表面通了,但env权限缺了、bashrc里藏了个exit、或者网卡名不一致导致VIP根本没绑上去——这些细节不会报错,只会让MHA在某个环节静默卡死。

相关专题

更多
Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

2026.10.22

120

11

Gradle Wrapper配置教程
Gradle Wrapper配置教程

本专题介绍Gradle Wrapper的基本作用,涵盖文件组成、生成方法、版本配置和任务调用,帮助你理解项目如何使用指定的Gradle版本,减少不同开发环境带来的构建差异。

2026.10.22

60

10

Golangci-lint检查器使用教程
Golangci-lint检查器使用教程

本专题整理Golangci-lint常用Linters的用途与配置方法,覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查,帮助项目合理选规则。

2026.10.22

60

15

Gradle怎么构建Java项目
Gradle怎么构建Java项目

本专题介绍Gradle Java项目构建方法,涵盖Java插件配置、依赖声明、源码编译、测试执行和打包检查,帮助你理解各阶段的任务关系,逐步完成项目构建。

2026.10.22

40

10

PHP时间戳漏洞修复教程
PHP时间戳漏洞修复教程

本专题汇总PHP常见时间戳漏洞,包括2038年溢出、时区漂移、时间戳伪造、重放攻击、时间盲注与日志审计失效等,并给出升级64位环境、使用 DateTimeImmutable、统一UTC、严格超时校验、预处理绑定、hash_equals 比对等修复方案,帮助开发者快速排查和加固时间相关代码。

2026.10.22

60

25

Golangci-lint配置文件与规则设置
Golangci-lint配置文件与规则设置

本专题聚焦Golangci-lint YAML配置文件,讲清运行参数、规则启停、目录排除、问题过滤及严重级别设置,便于团队统一检查标准。

2026.10.22

20

15

Golangci-lint安装与入门教程
Golangci-lint安装与入门教程

本专题讲解Golangci-lint的安装、初始化、基础命令和首次代码检查,覆盖本地环境、Docker及多平台用法,帮助Go开发者快速上手。

2026.10.22

40

15

PHP2Shell高危漏洞修复教程
PHP2Shell高危漏洞修复教程

PHP2Shell漏洞是什么,哪些PHP版本和运行环境会受到影响,服务器应该如何检测与修复?本专题提供版本自查脚本、Linux与Docker升级命令、PHP-FPM和Apache排查步骤,以及修复验证、临时缓解和应急响应方案。

2026.10.22

320

12

剧云人物设定与关系管理教程
剧云人物设定与关系管理教程

本专题介绍剧云人物设定与关系管理,讲解角色小传、性格职业、人物目标、背景资料和关系网络的创建及维护方法。

2026.10.22

40

16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习