什么是Java中的工作窃取算法(Work Stealing)_ForkJoinPool双端队列减少线程竞争的设计

云敏姑娘_1477

云敏姑娘_1477

2026-03-20

877人浏览

原创

Work Stealing 在 ForkJoinPool 中通过双端队列实现:线程本地 LIFO 操作(队尾),偷任务时 FIFO 从他人队列队首取,避免伪共享;仅适用于无状态、CPU 密集型可拆分任务,粒度建议 >100μs。

什么是java中的工作窃取算法(work stealing)_forkjoinpool双端队列减少线程竞争的设计

Work Stealing 在 ForkJoinPool 里怎么实际起作用

ForkJoinPool 默认用双端队列(Deque)给每个线程配一个任务栈,不是共享队列。线程自己干活时从**队尾 push/pop**(LIFO),避免伪共享;偷任务时去别人队列的**队首 take**(FIFO),降低冲突概率。

这不是理论设计——它直接决定你写 ForkJoinTask 时要不要重写 compute() 的拆分逻辑:如果子任务之间有强依赖或状态耦合,偷走一个中间任务可能让执行结果错乱。

  • 只在 CPU 密集型、可递归拆分的任务里有效(比如归并排序、遍历树结构),IO 或阻塞操作会卡住整个线程队列
  • ForkJoinPool.commonPool() 的并行度默认是 Runtime.getRuntime().availableProcessors() - 1,不是核数,别硬凑满核
  • 任务太小(比如每次 compute() 只做几次加法)反而增加调度开销,建议单个子任务耗时 > 100μs 再考虑 fork

为什么偷任务总从别人队列头拿,而不是尾部

尾部是原线程正在活跃操作的位置,缓存行(cache line)大概率被它独占。如果偷也从尾拿,两个线程反复争同一 cache line,触发总线嗅探和失效,性能暴跌——这就是伪共享(false sharing)。

队首是“冷区”,原线程几乎不碰,偷线程读取它不会干扰原线程的高速缓存局部性。JDK 实现里这个队首操作是通过 poll() 或 pollFirst() 完成的,底层用的是 sun.misc.Unsafe 的原子操作,不是 synchronized。

  • 双端队列不是 ArrayDeque,而是 ForkJoinPool 自研的 WorkQueue,支持无锁出队(head 指针 CAS)
  • 偷失败(对方队列空或正被修改)就立即放弃,转去扫描下一个空闲线程,不自旋等待
  • 偷的成功率低?说明任务粒度太粗或线程数远超可用核心数,得调 parallelism 参数

ForkJoinPool 提交任务后,线程到底什么时候开始偷

没有固定时机。一个线程执行完自己队列所有任务后,会进入“helpJoin”循环:先检查有没有正在 join 的任务要协助(比如等子任务返回),没有就启动“scan”阶段——随机选几个其他线程的队列,尝试从队首偷一个任务。

Java调试
Java调试

通过 JDWP 实现 Java 远程调试:连接远程 JVM、设置断点、单步执行代码、查看变量值、获取调用栈。适用于需要调试远程 Java 应用、排查运行时状态、追踪代码执行流程的场景。 术语注解 JDWP:Java Debug Wire Protocol,Java 调试有线协议(Java 远程调试底层通信协议) remote JVM:远程 Java 虚拟机 step through code:代码单步调试(步入 / 步过 / 步出调试) inspect variables:变量查看 / 变量检视 stac

下载

注意:invoke() 和 submit() 行为不同:invoke() 是同步阻塞直到结果返回,期间当前线程可能帮着偷;submit() 只是把任务扔进全局队列或随机 worker 队列,提交者线程立刻返回,不参与后续调度。

  • 偷不是轮询所有线程,而是用一个简单的哈希位移算法跳着找(避免热点竞争),最多试 64 次就放弃
  • 如果所有队列都空了,线程会进入 park 状态,直到新任务提交或被唤醒,不会空转耗电
  • 别在 compute() 里调 Thread.sleep() 或 Object.wait(),这会让整个 worker 线程挂起,影响偷任务调度节奏

常见报错 RejectionException 和工作窃取有关系吗

没关系。RejectedExecutionException 出现在 ForkJoinPool 已 shutdown 或队列满(比如设置了有限容量且任务爆炸式提交)时,和偷不偷任务无关。真正和工作窃取相关的异常是 RuntimeException 在偷来的任务里抛出——它会顺着原始 join() 调用栈向上冒泡,但堆栈里可能看不到偷线程的痕迹,容易误判为“莫名崩溃”。

  • 调试时开启 -Djava.util.concurrent.ForkJoinPool.common.parallelism=2 降低并发度,更容易复现偷任务路径
  • 不要在 compute() 里捕获 Throwable 后静默吞掉,否则偷线程出错等于任务消失
  • 自定义 ForkJoinPool 时传入的 UncaughtExceptionHandler 只对 worker 线程顶层异常生效,偷来的任务异常仍走 join() 的异常传播机制

事情说清了就结束。双端队列的设计细节藏在 ForkJoinPool.WorkQueue 的注释里,但真正影响行为的,是你拆分任务的边界是否清晰、有没有隐式共享状态、以及是否误把阻塞操作塞进了 compute 流程。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

11757

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

8862

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

7612

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1244

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1008

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1496

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3089

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20331

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1355

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习