LVS怎么排查调度算法不均导致单台后端服务器被活活打死

星晨同学_3038

星晨同学_3038

2026-10-09

771人浏览

原创

ipvsadm -ln --stats 显示的是内核 ipvs 模块实时统计的连接分布,重点看 conns(已调度连接数)和 pps(每秒包数),若某 realserver 的 conns 持续超其他节点 3 倍且 1 分钟不回落,表明调度异常;常见原因包括 wlc 权重设错、健康检查后连接未回收、dr 模式下 arp 配置错误导致流量绕过调度器。

lvs怎么排查调度算法不均导致单台后端服务器被活活打死

ipvsadm -ln --stats 看连接数是否真不均

别光看 ipvsadm -L 的规则列表,那只是静态配置;真正决定流量去向的是内核 IPVS 模块实时统计的连接分布。执行 ipvsadm -ln --stats,重点盯 Conns(当前连接数)和 PPS(每秒包数)两列,按 realserver 排序后对比差异。如果某台 Conns 是其他节点的 3 倍以上,且持续 1 分钟不回落,基本可以确认不是瞬时抖动,而是调度逻辑出了问题。

常见误判点:没关掉健康检查临时剔除节点,导致流量被强制压到剩余节点;或者某台 RS 刚恢复,IPVS 还没来得及把历史连接数清零,Conns 滞留虚高。

wlc 算法下 weight 设错是最大元凶

wlc(加权最小连接)公式是 (active_conn × 256 + inactive_conn) / weight,它默认把 weight 当作服务器处理能力的倒数。但很多人直接按 CPU 核数设 weight=8、weight=4,结果发现 8 核机器反而分得更少——因为它的响应延迟高、连接堆积快,实际分母变大了。

  • 真实权重应基于压测或历史负载反推:比如某台 Redis 平均延迟比其他高 30%,weight 就不该设 10,而该设 6~7
  • 检查当前权重:用 ipvsadm -ln 看输出中 Weight 列,确认是否和配置一致
  • 临时调权验证:执行 ipvsadm -e -t VIP:PORT -r RIP:PORT -w 3 降低嫌疑节点权重,观察 Conns 是否快速下降

DR 模式下 ARP 配置错误会导致“假均衡”

在 DR 模式中,如果某台 RS 没正确设置 arp_ignore=1 和 arp_announce=2,它可能在后台偷偷响应 VIP 的 ARP 请求,导致部分客户端把后续请求直接发给它,绕过 LVS 调度器。这时 ipvsadm 统计看起来“均衡”,但真实流量已经分裂——一台在 IPVS 表里接活,另一台靠 ARP 抢到了直连流量。

XiaoHu.AI
XiaoHu.AI

一款AI工具,主要用于由小互建立的一个AI资讯、教程、课程、工具以及开源项目案例的平台,适合需要提升相关任务效率的用户。

下载

验证方法:

  • 在每台 RS 上执行 sysctl net.ipv4.conf.all.arp_ignore 和 sysctl net.ipv4.conf.lo.arp_ignore,必须都为 1
  • 执行 arp -an | grep VIP,确保只有调度器 MAC 地址对应 VIP,RS 上不能有该条目
  • 抓包确认:tcpdump -i any host VIP and arp,看是否有 RS 主动发送 ARP Reply

健康检查失败后连接未及时回收

Keepalived 的 TCP_CHECK 或 HTTP_GET 失败后,会把 realserver 状态标为 Inactive,但已建立的长连接不会自动断开。如果这台 RS 实际已卡死(比如 Java 应用 OOM 后拒绝新请求但 TCP 连接还 hang 在那里),IPVS 仍会把新请求继续分发过去,而旧连接又无法释放,最终形成“连接数暴涨却无响应”的假象。

应对方式:

  • 缩短健康检查超时:connect_timeout 3、retry 2,避免长时间误判
  • 配合内核参数:echo 30 > /proc/sys/net/ipv4/tcp_fin_timeout 加速异常连接回收
  • 写个巡检脚本定期执行 ss -tn state established '( dport = :PORT )' | wc -l,对连接数异常高的 RS 主动踢出
真实压测和线上流量特征差异大时,wlc 算法容易失准;而 DR 模式下任何一台 RS 的 ARP 配置漏掉,都会让整个调度逻辑失效——这两点最容易被忽略,也最难从日志里直接看出。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

数据库优化

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2343

5

前端和后端的区别
前端和后端的区别

前端关注的是用户界面的设计和交互,而后端则注重数据处理和逻辑控制。想了解更多前端后端的相关内容,可以阅读本专题下面的文章。

2024.03.19

6130

13

后端的主要工作内容介绍
后端的主要工作内容介绍

后端是应用程序的服务端部分,负责核心任务,如数据库交互、业务逻辑处理和响应客户端请求。想了解更多后端的相关内容,可以阅读本专题下面的文章。

2024.03.19

5486

10

服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

437

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

900

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2772

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

916

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

829

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

414

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习