自动挡线程池OOM最佳实践

Executors 类创建线程池的弊端

Executors创建线程池示例

Executors工具类始于JDK 1.5,是Java在java.util.concurrent包中提供的线程池类,Executors可用于快速创建线程池,既然它这么方便的让开发者使用线程池,但是为什么《阿里巴巴 Java 开发手册》中提到,禁止使用这些方法来创建线程池呢?

java 复制代码
    @GetMapping("oom1")
    public void oom1() throws InterruptedException {
        ExecutorService executorService = Executors.newFixedThreadPool(1);
        for (int i = 0; i < 100000000; i++) {
            executorService.execute(() -> {
                String payload = IntStream.rangeClosed(1, 1000000).mapToObj(__ -> "a").collect(Collectors.joining("")) + UUID.randomUUID().toString();
                try {
                    TimeUnit.HOURS.sleep(1);
                } catch (InterruptedException e) {
                }
                log.info(payload);
            });
        }

        executorService.shutdown();
        executorService.awaitTermination(1, TimeUnit.HOURS);
    }

代码中在for循环中使用Executors工具类来初始化一个单线程的 FixedThreadPool,循环 1 亿次向线程池提交任务,每个任务都会创建一个比较大的字符串然后休眠一小时,调用该接口一段时间后发生了OOM,下文我们通过dump日志来分析导致OOM的原因。

使用IDEA分析OOM原因

我们可以在IDEA中通过调整Spring Boot程序的jvm参数以快速复现OOM的原因。

ruby 复制代码
-Xms256m
-Xmx512m
-XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=/Users/liutaixiang/Documents/dev/logs

参数解读:

  • -Xms256m 设置JVM初始堆内存大小为256MB
  • -Xmx512m 设置JVM最大堆内存为512MB,如果应用内存需求超过512MB,会触发OutOfMemoryError
  • -XX:+HeapDumpOnOutOfMemoryError 在发生OutOfMemoryError时自动生成堆转储文件(Heap Dump),堆转储文件记录了JVM堆内存的完整快照,便于后续分析内存泄漏或对象占用过大的问题
  • -XX:HeapDumpPath=/Users/liutaixiang/Documents/dev/logs 指定堆转储文件的保存路径,该路径需要根据自身实际情况配置

配置完成后可启动SpringBoot项目调用接口等待OOM,待项目发出OOM错误后,可以去配置的路径下查找dump文件,一般以hprof为后缀,打开IDEA中的Profiler,将文件拖入Profiler即可,需要注意的是不同版本IDEA操作可能略有不同,可自行百度操作方式也可参考IDEA官网给出的操作教程。

IDEA官网教程

GC Roots 选项卡显示类列表及其对应的垃圾收集器根对象。此信息是在拍摄快照时无法进行垃圾收集的所有对象的概述。例如,查看哪个类加载器占用应用程序服务器中的大部分内存消耗可能很有用。

打开dump文件后可以看到程序在出现OOM错误时的资源占用情况,我们分配的最大堆内存是512MB,分析dump文件可以发现java.util.concurrent.LinkedBlockingQueue占用了516MB的内存,并且频繁触发GC Root,我们查看Executors类内部的源码实现可以知晓Executors正是使用了LinkedBlockingQueue作为队列,并且LinkedBlockingQueue的容量是一个Integer.MAX的无界队列,由此我们可以分析得到结论:Executors全自动挡的线程池使用不当会导致OOM。

相关推荐
逝水无殇18 小时前
C# 字符串(String)详解
开发语言·后端·c#
神奇小汤圆19 小时前
牛客网Java八股文|2026秋招面试题汇总(金九银十冲刺专用)
后端
cfm_291419 小时前
SpringBoot MockMvc
spring boot·后端·log4j
神奇小汤圆19 小时前
你的Java天花板,不是Spring Boot,是思维方式
后端
梨子同志19 小时前
Maven
后端
用户416596736935519 小时前
堡垒机 Web CLI 部署教程
后端
xiyueyezibile19 小时前
“自迭代” Skill 的 team-pitfalls 的演进
前端·后端·ai编程
叫我少年19 小时前
C# StringBuilder 基础入门
后端
会写代码的建筑师19 小时前
C# 源生成器使用方法
后端·架构
用户6389822458919 小时前
Poi-Tl根据word模板生成合并表头使用
后端