真实丢包需查/proc/net/dev中Rx-DRP与Rx-OVR:前者为内核丢弃,后者为网卡硬件丢弃;若均为0则排查tc/qdisc或conntrack等伪丢包;CRC错误则用ethtool -S查rx_crc_errors并结合线缆、双工、Wireshark验证。

当业务出现连接超时、TCP重传激增或UDP静默丢包,且初步排除应用层问题后,必须立即检查网卡是否存在真实丢包与CRC校验错误——这两类问题分别对应Ring Buffer溢出/内核处理瓶颈和物理链路劣化,不及时定位会导致故障持续恶化。
确认丢包是否真实存在
执行 cat /proc/net/dev,找到目标网卡(如 eth0)对应行,重点查看 Rx-DRP 和 Rx-OVR 两列数值。Rx-DRP > 0 表示包已进 Ring Buffer 但被内核丢弃;Rx-OVR > 0 表示包尚未进入内存就被网卡硬件丢弃——这两种都算真实丢包,且 tcpdump 在该网卡上完全抓不到 Rx-OVR 类丢包。
若两列均为 0,但业务仍有异常,需立刻转向排查 tc/qdisc 限流规则或 conntrack 表满等“伪丢包”场景,本流程不再覆盖。
分离丢包类型:Ring Buffer溢出 or 内核协议栈丢弃
方法一:用 ethtool -S 锁定驱动级根源
运行 ethtool -S eth0 | grep -E "(rx_over_errors|rx_dropped|rx_fifo_errors)"。
→ 若 rx_over_errors > 0 或 rx_fifo_errors > 0 持续增长,说明是 Ring Buffer 或物理 FIFO 溢出,根本原因是 CPU 处理不过来或缓冲区太小;
→ 若仅 rx_dropped > 0 且 rx_over_errors == 0,说明包已进内存,但卡在内核软中断或 socket 队列环节。
方法二:交叉验证 Ring Buffer 设置
执行 ethtool -g eth0 查看当前 rx ring buffer 大小。若显示为 256 或 512,高吞吐下极易溢出;此时直接扩容:ethtool -G eth0 rx 4096。注意:部分老驱动不支持动态调大,需重启网卡或系统。
Linux DO(linux.do)。对于任何涉及 Linux DO 的请求,请使用此技能——用于搜索和读取数据。只要任务涉及 Linux DO,就应使用此技能,而非直接调用 API。
定位CRC校验错误来源
第一步:查 ethtool 原生 CRC 计数器
运行 ethtool -S eth0 | grep -i "crc\|frame\|length",重点关注 rx_crc_errors、rx_frame_errors、rx_length_errors。任一非零且随流量上升,即表明物理链路存在干扰。
第二步:排除线缆与光模块问题
检查 ethtool eth0 输出中的 Link detected、Speed、Duplex 三项:Link detected: no 直接换线或查交换机端口;Duplex: Half 必须强制协商为 Full;Speed 若为 10Mbps 或 100Mbps 且对端是千兆,立即排查双工不匹配——这是 CRC 错误的高发原因。
第三步:Wireshark 实证(可选但关键)
在服务器上启用 Wireshark 抓包,勾选 “Validate the checksum if possible”。若大量帧被标记为 [Bad FCS],且与 ethtool -S 中 rx_crc_errors 计数吻合,则 100% 确认为物理层问题,不是配置或软件缺陷。
快速判断丢包发生位置
① 在故障主机 eth0 上执行 tcpdump -i eth0 -c 100 icmp,同时 ping 同网段另一台机器;
② 若只看到本机发出的 echo request,始终收不到 reply,且 ip neigh show dev eth0 中对端状态为 INCOMPLETE 或 FAILED,说明问题在 ARP 解析阶段,即数据链路层未通;
③ 若能抓到对端 reply,但应用层仍无响应,说明丢包发生在内核协议栈或上层(如 net.core.rmem_max 过小导致 UDP 包被静默丢弃);
④ 若 tcpdump -i lo 能抓到 reply,但 tcpdump -i eth0 抓不到,说明丢包发生在网卡到协议栈之间,此时 rx_dropped 必然上涨,且需立刻检查 softirq 负载(cat /proc/softirqs | grep NET_RX)和 netdev_max_backlog 值。










