Java并发编程:两种控制并发度的实现方法及其比较

前言

在Java并发编程中,有效控制并发度是提高应用性能和资源利用率的关键。本文将通过一个Java示例代码,探讨两种控制并发度的实现方法:竞争队列法和信号量法。我们将详细分析这两种方法的实现原理,并比较它们的优缺点。为降低理解难度,本文不考虑快速失败、任务取消、异常处理、超时控制等问题,这些问题常常基于本文的代码进行拓展。

首先,让我们看看用于生成任务的 getTasks 方法:

java 复制代码
private static BlockingQueue<Runnable> getTasks() {
    IntFunction<Integer> square = x -> x * x;
    BlockingQueue<Runnable> tasks = IntStream.range(0, 10).<Runnable>mapToObj(num -> () -> {
        int result = square.apply(num);
        System.out.println("The square of " + num + " is " + result);
    }).collect(Collectors.toCollection(() -> new ArrayBlockingQueue<>(10)));
    return tasks;
}

这个方法创建了一个包含10个任务的 BlockingQueue。每个任务是一个 Runnable 对象,负责计算一个数字的平方并打印结果。这个方法模拟了一个实际场景中的任务队列,每个任务都是独立的且可并行执行的。

现在,让我们讨论两种并发控制方法:

1. 竞争队列法(Race Queue Method)

java 复制代码
static class RaceQueueDemo {
    public static void main(String[] args) {
        ExecutorService e = Executors.newCachedThreadPool();
        int parallelism = 3; // 并发度
        BlockingQueue<Runnable> tasks = getTasks();

        for (int i = 0; i < parallelism; i++) {
            e.submit(() -> {
                Runnable r;
                while ((r = tasks.poll()) != null) {
                    r.run();
                }
            });
        }

        e.shutdown();
    }
}

这种方法的核心思想是:

  • 创建一个线程池
  • 定义并发度(这里是3)
  • 提交与并发度相同数量的任务到线程池
  • 每个任务负责从任务队列中获取并执行任务

优点:

  1. 实现简单,代码量少
  2. 任务执行效率高,同步开销低

2. 信号量法(Semaphore Method)

java 复制代码
static class SemaphoreDemo {
    public static void main(String[] args) {
        ExecutorService e = Executors.newCachedThreadPool();
        ExecutorService taskSubmitter = Executors.newSingleThreadExecutor();
        int parallelism = 3; // 并发度

        Semaphore semaphore = new Semaphore(parallelism);
        Future<?> submitted = taskSubmitter.submit(() -> {
            BlockingQueue<Runnable> tasks = getTasks();
            Runnable r;
            while ((r = tasks.poll()) != null) {
                try {
                    semaphore.acquire();
                    Runnable finalR = r;
                    e.submit(() -> {
                        try {
                            finalR.run();
                        } finally {
                            semaphore.release();
                        }
                    });
                } catch (InterruptedException ex) {
                    Thread.currentThread().interrupt();
                }
            }
        });

        Futures.getUnchecked(submitted);

        taskSubmitter.shutdown();
        e.shutdown();
    }
}

这种方法的核心思想是:

  • 创建一个信号量,初始许可数等于并发度
  • 使用单线程执行器来提交任务
  • 每次提交任务前先获取信号量许可
  • 任务执行完毕后释放信号量许可

优点:

  1. 并发度控制更加精确
  2. 可以保证同时执行的任务数不超过设定的并发度
  3. 资源利用更加均衡
  4. 可以方便地处理任务执行异常的情况

缺点:

  1. 实现相对复杂,代码量较多
  2. 需要额外的线程(taskSubmitter)来管理任务提交
  3. 由于使用了信号量,可能会有一些同步开销

比较与总结

  1. 复杂性:竞争队列法实现简单,易于理解和维护;信号量法相对复杂,但提供了更细粒度的控制。

  2. 资源利用:信号量法能够更均衡地利用资源,特别是在任务执行时间差异较大的情况下。

  3. 异常处理:信号量法更容易处理任务执行过程中的异常情况,而竞争队列法在这方面略显不足。

  4. 灵活性:两种方法都允许动态调整并发度,但信号量法在运行时调整并发度更为方便。

  5. 性能开销:竞争队列法可能在高并发情况下有更好的性能,因为它减少了线程间的协调开销。

选择哪种方法取决于具体的应用场景:

  • 如果需要严格控制并发度且任务执行时间差异较大,信号量法可能更合适。
  • 如果追求简单实现和较高性能,并且可以容忍短暂的并发度波动,竞争队列法可能是更好的选择。

在实际应用中,可能需要结合这两种方法或使用更高级的并发控制技术来满足特定需求。无论选择哪种方法,都需要根据实际情况进行性能测试和调优,以达到最佳的并发效果。

相关推荐
qq_269506754 分钟前
第29课-Servlet基础
java
打工仔折腾 AI15 分钟前
用 Shell 脚本自动部署 mysqld_exporter 并接入 Prometheus 远程抓取
人工智能·后端·python·性能优化·ai agent 实战
毅炼16 分钟前
不写多语言 SDK,怎么让 Python、Go、Node 服务接入注册中心?
java·后端·系统架构·gateway
2501_9378609420 分钟前
上篇:网络编程基础与UDP套接字编程
java·网络·计算机网络
Methy23 分钟前
IoTHub半个月崩了五次?都是裸rethrow惹的祸
服务器·c++·后端
泡海椒25 分钟前
jquick-pdf 表格行列尺寸控制实战:单元格合并的可行边界
java·开发语言·pdf
Wang's Blog29 分钟前
Java 项目实战: 外卖平台-后台系统登录功能开发
java·服务器·redis
我不会起名字32233 分钟前
一天一道力扣Hot100(36):深度优先算法---组合总和
数据结构·c++·后端·python·算法·go
海鸥-w36 分钟前
spingboot定义一个全局异常处理器
java
回家路上绕了弯43 分钟前
AI 编程助手为什么反复读取同一份上下文?如何减少无效重复
后端