ForkJoinPool 与工作窃取

1.ForkJoin线程池的工作窃取原理是怎么回事

ForkJoinPool 是 JDK7 引入的分治并行线程池,parallelStream 底层依赖它,核心依靠 ForkJoinTask 的 fork/join 分治模型与工作窃取机制提升 CPU 利用率;池内每个 ForkJoinWorkerThread 绑定独立 WorkQueue 双端队列,自身 fork 出的任务加到队列尾部、本地从尾部取任务执行,线程无事可做时会生成随机下标环形遍历所有其他 ForkJoinWorkerThread,从对方 WorkQueue 队列头部批量偷取一半任务执行,大幅减少锁竞争;并行流依靠 Spliterator 的 trySplit 对半切分数据,递归生成 AbstractTask 拆分子任务,分片元素低于 1024 阈值就停止拆分作为叶子任务,fork 提交子任务后当前线程同步处理另一半,调用 join 等待子任务期间不会空等,会持续窃取其他任务;线程池分为 ForkJoinPool.commonPool () 全局公共池和手动 new 的自定义 ForkJoinPool,公共池所有并行流共享、不适合 IO 阻塞任务,IO 场景建议单独创建 ForkJoinPool 隔离资源,对比 ThreadPoolExecutor 共享阻塞队列的实现,私有队列 + 工作窃取的设计在纯计算密集、可拆分任务场景调度效率更高

2.ForkJoinPool 中的线程数量是固定死的吗?

ForkJoinPool 线程数有上限、不会自动扩容:默认并行流使用的 ForkJoinPool.commonPool() 线程数量 JVM 启动后永久固定;手动 new 的自定义 ForkJoinPool 只能指定最大并行度,线程不会超过该值,空闲线程可回收,但无法动态扩容突破上限,运行阶段不能修改线程数量。

  • 全局公共池 ForkJoinPool.commonPool ()(parallelStream 默认用)

    并行度(核心线程数)初始化后固定,运行中不能动态扩容 / 缩容。

    默认并行度 = CPU 核心数 - 1;

    启动前通过 JVM 参数 -Djava.util.concurrent.ForkJoinPool.common.parallelism=N 修改,JVM 启动后再改参数无效;

    没有任务时线程也不会销毁,池内工作线程常驻,数量全程不变。

  • 手动 new ForkJoinPool (parallelism) 自定义线程池

    传入的并行度是最大并发工作线程数,固定上限,不会自动扩容:

    java 复制代码
    运行
    // 最多4条工作线程,不会再多开
    ForkJoinPool pool = new ForkJoinPool(4);
3. parallelStream() 是如何利用 ForkJoinPool 进行并行处理的

parallelStream() 方法是对数据进行对半切分成2个, 加入现成的内部的升段对垒尾部. 左侧任务等待其它线程窃取, 自己则执行右侧任务. 执行的逻辑是递归进行拆分

相关推荐
lilian2335 小时前
Harmony os 技术实战|拼豆制图06:收藏 ID、生成记录与重启恢复怎么不打架
android·java·数据库·harmonyos
2601_955759625 小时前
ClaudeAPI成本中心与业务标签设计指南
android·java·数据库
雾喔6 小时前
算法练习7
java·数据结构·算法
掉鱼的猫6 小时前
跳出 Fatjar 的束缚:Solon 插件的体外扩展(E-Spi)与热插拔(H-Spi)
java
Bill FANG7 小时前
从原生Java NIO到Netty重构:充电桩Socket服务端高性能改造实战
java·重构·nio
2601_955759417 小时前
Claude API 成本审计:该看哪些指标,怎么分析更靠谱
java
带刺的坐椅7 小时前
跳出 Fatjar 的束缚:Solon 插件的体外扩展(E-Spi)与热插拔(H-Spi)
java·jar·solon·plugin·fatjar
宁之明起(B服)7 小时前
Java 反序列化漏洞-xmldecoder/SnakeYAM
java·开发语言
禾高网络8 小时前
开启环保新潮流:回收小程序系统功能介绍
java·大数据·小程序
deviant-ART8 小时前
java stream 的 findFirst 及 findAny 方法遇到 null 元素时会出现 NullPointerException
java·开发语言