ForkJoinPool 与工作窃取

1.ForkJoin线程池的工作窃取原理是怎么回事

ForkJoinPool 是 JDK7 引入的分治并行线程池,parallelStream 底层依赖它,核心依靠 ForkJoinTask 的 fork/join 分治模型与工作窃取机制提升 CPU 利用率;池内每个 ForkJoinWorkerThread 绑定独立 WorkQueue 双端队列,自身 fork 出的任务加到队列尾部、本地从尾部取任务执行,线程无事可做时会生成随机下标环形遍历所有其他 ForkJoinWorkerThread,从对方 WorkQueue 队列头部批量偷取一半任务执行,大幅减少锁竞争;并行流依靠 Spliterator 的 trySplit 对半切分数据,递归生成 AbstractTask 拆分子任务,分片元素低于 1024 阈值就停止拆分作为叶子任务,fork 提交子任务后当前线程同步处理另一半,调用 join 等待子任务期间不会空等,会持续窃取其他任务;线程池分为 ForkJoinPool.commonPool () 全局公共池和手动 new 的自定义 ForkJoinPool,公共池所有并行流共享、不适合 IO 阻塞任务,IO 场景建议单独创建 ForkJoinPool 隔离资源,对比 ThreadPoolExecutor 共享阻塞队列的实现,私有队列 + 工作窃取的设计在纯计算密集、可拆分任务场景调度效率更高

2.ForkJoinPool 中的线程数量是固定死的吗?

ForkJoinPool 线程数有上限、不会自动扩容:默认并行流使用的 ForkJoinPool.commonPool() 线程数量 JVM 启动后永久固定;手动 new 的自定义 ForkJoinPool 只能指定最大并行度,线程不会超过该值,空闲线程可回收,但无法动态扩容突破上限,运行阶段不能修改线程数量。

  • 全局公共池 ForkJoinPool.commonPool ()(parallelStream 默认用)

    并行度(核心线程数)初始化后固定,运行中不能动态扩容 / 缩容。

    默认并行度 = CPU 核心数 - 1;

    启动前通过 JVM 参数 -Djava.util.concurrent.ForkJoinPool.common.parallelism=N 修改,JVM 启动后再改参数无效;

    没有任务时线程也不会销毁,池内工作线程常驻,数量全程不变。

  • 手动 new ForkJoinPool (parallelism) 自定义线程池

    传入的并行度是最大并发工作线程数,固定上限,不会自动扩容:

    java 复制代码
    运行
    // 最多4条工作线程,不会再多开
    ForkJoinPool pool = new ForkJoinPool(4);
3. parallelStream() 是如何利用 ForkJoinPool 进行并行处理的

parallelStream() 方法是对数据进行对半切分成2个, 加入现成的内部的升段对垒尾部. 左侧任务等待其它线程窃取, 自己则执行右侧任务. 执行的逻辑是递归进行拆分

相关推荐
晨曦中的暮雨6 小时前
限流算法——固定窗口、滑动窗口、漏桶、令牌桶
java·开发语言·算法
文丑颜不良啊7 小时前
LeetCode876~900题目解析
java·leetcode
aloha_7898 小时前
Java 基础、集合、异常与 JUnit 5 速查
java·junit·sqlserver
知守观8 小时前
设计模式实战:从真实老项目中看标准模板方法与工厂的落地
java·spring·设计模式
独隅8 小时前
Claude API 实战教程:从入门到完整项目
android·java·数据库·claude·claude code
Wang's Blog9 小时前
Java 项目实战: 交友项目 - 圈子功能实现:总结
java·开发语言·交友
SL_staff9 小时前
JVS私有化文档系统上线避坑指南:5大运维与业务协同断点及检测加固实践
java·开源·全栈
FinelyYang10 小时前
考试系统简答题 AI 阅卷:覆盖度驱动、异步评分与人机协同落地实践
java·大数据·人工智能
hhhjhl10 小时前
Yup 跨端三方库仓颉适配全流程
java·开发语言
用户31268748772011 小时前
Java 对象内存布局:压缩指针、对齐填充与 JOL 实测
java