如何通过 Selector 的 epoll 实现理解 Java NIO 处理万级并发连接的底层原理

小丽大大_8541

小丽大大_8541

2026-04-15

974人浏览

原创

Java NIO万级并发的根本原因是Linux下Selector默认绑定epoll,通过epoll_create1()创建独立事件实例,利用红黑树管理注册、就绪链表通知,避免线性扫描,且依赖非阻塞I/O与手动清理selectedKeys。

如何通过 selector 的 epoll 实现理解 java nio 处理万级并发连接的底层原理

Java NIO 能处理万级并发连接,根本原因不是 Selector 本身有多“智能”,而是它在 Linux 下默认绑定 epoll 系统调用,绕过了 select/poll 的线性扫描缺陷。关键不在 Java 层怎么写,而在内核如何响应注册、就绪和事件分发。

为什么 Selector.open() 在 Linux 上实际调用的是 epoll_create1()

OpenJDK(21+)中,Selector.open() 最终会走到 EPollSelectorImpl 构造器,里面直接调用 EPoll.create() —— 这是个 JNI 方法,底层就是 epoll_create1(0) 系统调用。这意味着:

  • 每个 Selector 实例对应一个独立的 epoll 实例(即一个内核 event poll 对象),有自己专属的就绪队列和红黑树
  • 不依赖全局 FD 位图(fd_set),因此没有 1024 限制;现代 Linux 默认支持百万级 FD(受 /proc/sys/fs/file-max 和进程 ulimit -n 控制)
  • 创建时分配的 address 是一块固定大小的 native 内存(由 eventPollArraySize 决定),用于后续 epoll_wait() 直接填充就绪事件,避免反复 malloc

channel.register(selector, OP_READ) 底层到底做了什么

调用 register() 不是把 Channel “存进 Selector”,而是触发一次 epoll_ctl(epfd, EPOLL_CTL_ADD, fd, &event)。其中:

  • fd 是 SocketChannel 底层 socket 的文件描述符(Linux 中为整数,≥3)
  • event.events 至少包含 EPOLLIN(对应 OP_READ),通常还带 EPOLLET(边缘触发)标志
  • event.data.ptr 指向 JVM 内的 SelectionKey 对象地址,让内核事件就绪时能快速回溯到 Java 层上下文
  • 这个操作将 fd 插入 epoll 实例维护的红黑树,时间复杂度 O(log n),不是遍历

selector.select() 为什么不会随连接数增加而变慢

select() 方法阻塞时,实际执行的是 epoll_wait(epfd, events, maxEvents, timeout)。它的高效来自三点:

Java调试
Java调试

通过 JDWP 实现 Java 远程调试:连接远程 JVM、设置断点、单步执行代码、查看变量值、获取调用栈。适用于需要调试远程 Java 应用、排查运行时状态、追踪代码执行流程的场景。 术语注解 JDWP:Java Debug Wire Protocol,Java 调试有线协议(Java 远程调试底层通信协议) remote JVM:远程 Java 虚拟机 step through code:代码单步调试(步入 / 步过 / 步出调试) inspect variables:变量查看 / 变量检视 stac

下载
  • 内核只返回“真正就绪”的 fd 列表(比如 10000 个连接里只有 3 个有数据可读),Java 层拿到的 selectedKeys() 集合大小≈就绪数,不是总连接数
  • 就绪事件通过就绪链表(ready list)通知,无需遍历全部注册 fd;红黑树仅用于管理注册关系,不参与就绪判定
  • 使用 EPOLLET 后,内核只在 fd 状态从“未就绪→就绪”时通知一次,避免重复唤醒(对比 EPOLLONESHOT 更轻量)

容易被忽略的关键约束:非阻塞 + 手动清理 selectedKeys

很多人写出高并发 bug,不是因为不懂 epoll,而是忽略了 Java NIO 的两个强制契约:

  • SocketChannel.configureBlocking(false) 必须在 register() 前设置,否则 epoll_ctl 会失败(Linux 不允许将阻塞 fd 加入 epoll)
  • selectedKeys() 返回的是一个内部复用的 HashSet,每次 select() 返回后必须显式调用 keyIterator.remove() 或 selectedKeys().clear(),否则下次 select() 会重复返回已处理过的 key(因为内核没清,Java 层也没清)
  • 如果 channel 关闭但没 cancel 对应 SelectionKey,其 fd 仍留在 epoll 红黑树中,造成 fd 泄漏,最终 hit EMFILE 错误

真正的性能瓶颈往往不出现在 epoll 本身,而出现在 Java 层对就绪 key 的处理逻辑是否阻塞、buffer 是否复用、direct buffer 是否被 GC 干扰——这些才是压测时连接数上万后抖动或吞吐掉档的根源。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

11917

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

9022

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

7712

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1264

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1008

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1516

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3129

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20371

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1375

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习