ForkJoinPool 与工作窃取

1.ForkJoin线程池的工作窃取原理是怎么回事

ForkJoinPool 是 JDK7 引入的分治并行线程池,parallelStream 底层依赖它,核心依靠 ForkJoinTask 的 fork/join 分治模型与工作窃取机制提升 CPU 利用率;池内每个 ForkJoinWorkerThread 绑定独立 WorkQueue 双端队列,自身 fork 出的任务加到队列尾部、本地从尾部取任务执行,线程无事可做时会生成随机下标环形遍历所有其他 ForkJoinWorkerThread,从对方 WorkQueue 队列头部批量偷取一半任务执行,大幅减少锁竞争;并行流依靠 Spliterator 的 trySplit 对半切分数据,递归生成 AbstractTask 拆分子任务,分片元素低于 1024 阈值就停止拆分作为叶子任务,fork 提交子任务后当前线程同步处理另一半,调用 join 等待子任务期间不会空等,会持续窃取其他任务;线程池分为 ForkJoinPool.commonPool () 全局公共池和手动 new 的自定义 ForkJoinPool,公共池所有并行流共享、不适合 IO 阻塞任务,IO 场景建议单独创建 ForkJoinPool 隔离资源,对比 ThreadPoolExecutor 共享阻塞队列的实现,私有队列 + 工作窃取的设计在纯计算密集、可拆分任务场景调度效率更高

2.ForkJoinPool 中的线程数量是固定死的吗?

ForkJoinPool 线程数有上限、不会自动扩容:默认并行流使用的 ForkJoinPool.commonPool() 线程数量 JVM 启动后永久固定;手动 new 的自定义 ForkJoinPool 只能指定最大并行度,线程不会超过该值,空闲线程可回收,但无法动态扩容突破上限,运行阶段不能修改线程数量。

  • 全局公共池 ForkJoinPool.commonPool ()(parallelStream 默认用)

    并行度(核心线程数)初始化后固定,运行中不能动态扩容 / 缩容。

    默认并行度 = CPU 核心数 - 1;

    启动前通过 JVM 参数 -Djava.util.concurrent.ForkJoinPool.common.parallelism=N 修改,JVM 启动后再改参数无效;

    没有任务时线程也不会销毁,池内工作线程常驻,数量全程不变。

  • 手动 new ForkJoinPool (parallelism) 自定义线程池

    传入的并行度是最大并发工作线程数,固定上限,不会自动扩容:

    java 复制代码
    运行
    // 最多4条工作线程,不会再多开
    ForkJoinPool pool = new ForkJoinPool(4);
3. parallelStream() 是如何利用 ForkJoinPool 进行并行处理的

parallelStream() 方法是对数据进行对半切分成2个, 加入现成的内部的升段对垒尾部. 左侧任务等待其它线程窃取, 自己则执行右侧任务. 执行的逻辑是递归进行拆分

相关推荐
mldong11 小时前
给若依加审批流,不用 Flowable
java·spring boot·架构
Wang's Blog13 小时前
Java框架快速入门: Spring Security+OAuth2之数据库和实体类的RBAC改造
java·数据库·spring
讳疾忌医丶13 小时前
深度拆解 RocksDB 内核:基于 C++17 的 FIFO 调度状态机与温度阶梯自愈设计
java·c++·算法·架构
郑州光合科技余经理14 小时前
国际版外卖系统:税率字段怎么和订单主流程解耦
android·java·开发语言·前端·后端·php·ai编程
毅炼14 小时前
Rover-Suite 开源发布:轻量服务注册中心与网关一体化方案
java·后端·系统架构·gateway
梦想平凡14 小时前
百游棋牌源代码开发搭建教程(十):隔离部署、备份恢复与双端验收
java·前端·javascript·数据库·源代码管理
sunshine22 girl16 小时前
Idea中如何搜索
java·ide·intellij-idea
猫吻鱼16 小时前
【AI 01】【Spring AI 基础使用】
java·spring·spring ai
梨涡泥窝16 小时前
基于SSM的校园二手交易平台的设计与实现
java·tomcat
许彰午16 小时前
44-useRowSet镜像实现
java·低代码·架构