Java同时处理多个数据的方法详解

Tech Synapse2024-05-27 2:08

在Java中，同时处理多个数据通常涉及多线程、并发编程或异步编程。这里我将提供一个使用多线程的示例，因为多线程是处理多个数据并行的常见方式。

首先，我们需要定义一个任务（例如，处理一个数据项），然后创建多个线程来并行执行这些任务。

1.使用多线程处理多个数据

假设我们有一个整数列表，并且我们想要并行地对列表中的每个整数执行某个操作（例如，计算平方）。

（1）定义任务 ：我们可以创建一个实现Runnable接口的类来表示任务。

（2）创建线程：对于列表中的每个数据项，我们创建一个新的线程来执行该任务。

（3）启动线程 ：调用线程的start()方法来启动线程。

（4）等待线程完成 ：如果需要，我们可以使用join()方法来等待所有线程完成。

下面是完整的代码示例：

java 复制代码 
import java.util.ArrayList;  
import java.util.List;  
  
public class MultiDataProcessingExample {  
  
    // 定义任务：计算整数的平方  
    static class SquareTask implements Runnable {  
        private int number;  
  
        public SquareTask(int number) {  
            this.number = number;  
        }  
  
        @Override  
        public void run() {  
            int square = number * number;  
            System.out.println("The square of " + number + " is " + square);  
        }  
    }  
  
    public static void main(String[] args) {  
        // 创建一个整数列表  
        List<Integer> numbers = new ArrayList<>();  
        for (int i = 1; i <= 10; i++) {  
            numbers.add(i);  
        }  
  
        // 为每个整数创建一个线程来计算平方  
        List<Thread> threads = new ArrayList<>();  
        for (int number : numbers) {  
            Thread thread = new Thread(new SquareTask(number));  
            threads.add(thread);  
            thread.start(); // 启动线程  
        }  
  
        // 等待所有线程完成（可选）  
        for (Thread thread : threads) {  
            try {  
                thread.join();  
            } catch (InterruptedException e) {  
                e.printStackTrace();  
            }  
        }  
  
        // 所有线程都已完成，继续主线程的其他操作（如果有的话）  
        System.out.println("All threads have finished.");  
    }  
}

在这个示例中，我们定义了一个SquareTask类来实现Runnable接口，该类表示计算整数平方的任务。然后，在main方法中，我们创建了一个包含1到10的整数的列表，并为列表中的每个整数创建了一个新的线程来执行SquareTask。最后，我们启动了所有线程，并（可选地）等待它们完成。

2.使用JavaExecutorService和Callable接口来处理多个数据示例

下面是一个使用Java的ExecutorService和Callable接口来处理多个数据的示例。在这个例子中，我们将使用ExecutorService来管理线程池，并使用Future来获取每个任务的结果。

首先，我们定义一个实现Callable接口的任务，它返回计算后的结果。然后，我们创建一个ExecutorService，提交多个任务，并使用Future对象来收集结果。

java 复制代码 
import java.util.ArrayList;  
import java.util.List;  
import java.util.concurrent.*;  
  
public class MultiDataProcessingWithExecutorService {  
  
    // 定义任务：计算整数的平方并返回结果  
    static class SquareCallable implements Callable<Integer> {  
        private final int number;  
  
        public SquareCallable(int number) {  
            this.number = number;  
        }  
  
        @Override  
        public Integer call() throws Exception {  
            int square = number * number;  
            return square;  
        }  
    }  
  
    public static void main(String[] args) throws ExecutionException, InterruptedException {  
        // 创建一个整数列表  
        List<Integer> numbers = new ArrayList<>();  
        for (int i = 1; i <= 10; i++) {  
            numbers.add(i);  
        }  
  
        // 创建一个固定大小的线程池  
        ExecutorService executorService = Executors.newFixedThreadPool(5);  
  
        // 提交任务并获取Future列表  
        List<Future<Integer>> futures = new ArrayList<>();  
        for (int number : numbers) {  
            Future<Integer> future = executorService.submit(new SquareCallable(number));  
            futures.add(future);  
        }  
  
        // 获取并打印每个任务的结果  
        for (Future<Integer> future : futures) {  
            // 注意：get()方法会阻塞，直到任务完成  
            Integer result = future.get();  
            System.out.println("The square of " + (futures.indexOf(future) + 1) + " is " + result);  
        }  
  
        // 关闭线程池  
        executorService.shutdown();  
  
        // 等待所有任务完成（如果还没有完成的话）  
        try {  
            // 等待线程池中的任务在指定的时间内完成  
            if (!executorService.awaitTermination(60, TimeUnit.SECONDS)) {  
                // 线程池没有在给定的时间内终止，我们可以选择取消它  
                executorService.shutdownNow();  
            }  
        } catch (InterruptedException ie) {  
            // 当前线程在等待过程中被中断  
            executorService.shutdownNow();  
            Thread.currentThread().interrupt();  
        }  
  
        // 所有线程都已完成，继续主线程的其他操作（如果有的话）  
        System.out.println("All threads have finished.");  
    }  
}

在这个示例中，我们使用Executors.newFixedThreadPool(5)创建了一个包含5个线程的线程池。然后，我们为列表中的每个整数提交了一个SquareCallable任务，并将返回的Future对象保存在列表中。通过调用future.get()方法，我们可以获取每个任务的结果，并打印出来。最后，我们关闭了线程池，并等待所有任务完成。

使用ExecutorService和Callable通常比直接使用Thread和Runnable更加方便和灵活，因为ExecutorService提供了对线程池的管理，而Callable允许任务返回结果。

3.使用并发编程同时处理多个数据

在Java并发编程中，一种常见的方法是使用ExecutorService和Callable接口来同时处理多个数据，并收集结果。以下是一个完整的代码示例，展示了如何使用ExecutorService和Future来同时处理一个整数列表中的每个元素，并收集它们的平方结果：

java 复制代码 
import java.util.ArrayList;  
import java.util.List;  
import java.util.concurrent.*;  
  
public class ConcurrentSquareCalculator {  
  
    // 定义一个Callable任务来计算平方  
    static class SquareCallable implements Callable<Integer> {  
        private final int number;  
  
        public SquareCallable(int number) {  
            this.number = number;  
        }  
  
        @Override  
        public Integer call() throws Exception {  
            return number * number;  
        }  
    }  
  
    public static void main(String[] args) throws ExecutionException, InterruptedException {  
        // 创建一个整数列表  
        List<Integer> numbers = new ArrayList<>();  
        for (int i = 1; i <= 10; i++) {  
            numbers.add(i);  
        }  
  
        // 创建一个固定大小的线程池  
        ExecutorService executorService = Executors.newFixedThreadPool(5);  
  
        // 提交任务并收集Future对象  
        List<Future<Integer>> futures = new ArrayList<>();  
        for (int number : numbers) {  
            Future<Integer> future = executorService.submit(new SquareCallable(number));  
            futures.add(future);  
        }  
  
        // 等待所有任务完成并收集结果  
        List<Integer> squares = new ArrayList<>();  
        for (Future<Integer> future : futures) {  
            // 注意：get()方法会阻塞，直到任务完成  
            Integer square = future.get();  
            squares.add(square);  
        }  
  
        // 打印结果  
        for (int i = 0; i < numbers.size(); i++) {  
            System.out.println("The square of " + numbers.get(i) + " is " + squares.get(i));  
        }  
  
        // 关闭线程池  
        executorService.shutdown();  
  
        // 等待线程池中的任务都执行完毕  
        try {  
            if (!executorService.awaitTermination(60, TimeUnit.SECONDS)) {  
                // 线程池没有在给定的时间内终止，可以选择取消它  
                executorService.shutdownNow();  
            }  
        } catch (InterruptedException ie) {  
            // 当前线程在等待过程中被中断  
            executorService.shutdownNow();  
            Thread.currentThread().interrupt();  
        }  
  
        // 所有线程都已完成，继续主线程的其他操作（如果有的话）  
        System.out.println("All threads have finished.");  
    }  
}

在这个示例中，我们创建了一个SquareCallable类，它实现了Callable<Integer>接口，用于计算一个整数的平方。然后，在main方法中，我们创建了一个包含1到10的整数的列表，并创建了一个大小为5的固定线程池。

接下来，我们遍历整数列表，为每个整数创建一个SquareCallable任务，并提交给线程池执行。线程池会管理这些任务的执行，并返回Future对象，这些对象可以用于获取任务的结果。

我们将这些Future对象收集到一个列表中，并遍历这个列表，使用get()方法来获取每个任务的结果，并将结果收集到另一个列表中。注意，get()方法会阻塞，直到任务完成并返回结果。

最后，我们打印出每个原始数字的平方结果，并关闭线程池。我们还使用awaitTermination方法来等待线程池中的所有任务都执行完毕，以确保所有资源都被正确释放。

4.使用异步编程同时处理多个数据

在Java中进行异步编程以同时处理多个数据的一种常见方式是使用CompletableFuture。CompletableFuture是Java 8中引入的一个功能强大的类，它代表了一个异步计算的结果。以下是一个使用CompletableFuture来同时处理多个数据的示例：

java 复制代码 
import java.util.ArrayList;  
import java.util.List;  
import java.util.concurrent.CompletableFuture;  
import java.util.concurrent.ExecutionException;  
import java.util.stream.Collectors;  
  
public class AsyncProcessingExample {  
  
    // 一个方法用于模拟计算平方  
    public static int square(int number) {  
        // 假设这里有一些计算  
        try {  
            // 模拟耗时操作  
            Thread.sleep(1000);  
        } catch (InterruptedException e) {  
            Thread.currentThread().interrupt();  
        }  
        return number * number;  
    }  
  
    public static void main(String[] args) throws ExecutionException, InterruptedException {  
        // 创建一个整数列表  
        List<Integer> numbers = List.of(1, 2, 3, 4, 5);  
  
        // 使用stream和CompletableFuture.supplyAsync来异步处理每个数字  
        List<CompletableFuture<Integer>> futures = numbers.stream()  
                .map(number -> CompletableFuture.supplyAsync(() -> square(number)))  
                .collect(Collectors.toList());  
  
        // 使用CompletableFuture.allOf等待所有Future完成  
        CompletableFuture<Void> allFutures = CompletableFuture.allOf(futures.toArray(new CompletableFuture[0]));  
  
        // 等待所有任务完成  
        allFutures.join();  
  
        // 收集结果  
        List<Integer> squares = futures.stream()  
                .map(future -> {  
                    try {  
                        return future.get(); // 这可能会抛出异常，但在这个例子中我们假设没有异常  
                    } catch (InterruptedException | ExecutionException e) {  
                        throw new IllegalStateException(e);  
                    }  
                })  
                .collect(Collectors.toList());  
  
        // 打印结果  
        squares.forEach(System.out::println);  
    }  
}

在这个示例中，我们首先创建了一个包含整数的列表。然后，我们使用Java 8的流（Stream）API和CompletableFuture.supplyAsync来异步处理列表中的每个数字。supplyAsync方法会返回一个CompletableFuture，它代表异步计算的结果。

我们收集所有的CompletableFuture到一个列表中，并使用CompletableFuture.allOf来等待所有的Future完成。allOf方法返回一个新的CompletableFuture<Void>，当所有给定的Future都完成时，这个新的Future就完成了。

然后，我们调用join()方法来等待所有的Future完成。join()方法会阻塞当前线程，直到Future完成。

最后，我们再次使用流来从每个CompletableFuture中获取结果，并将它们收集到一个新的列表中。我们使用get()方法来获取结果，但请注意，如果Future的计算抛出异常，get()方法也会抛出异常。在这个例子中，我们假设没有异常，但在实际应用中，你应该妥善处理这些异常。

最后，我们打印出计算得到的平方数。

相关推荐
憨子周1 小时前
2M的带宽怎么怎么设置tcp滑动窗口以及连接池
java·网络·网络协议·tcp/ip
霖雨2 小时前
使用Visual Studio Code 快速新建Net项目
java·ide·windows·vscode·编辑器
SRY122404192 小时前
javaSE面试题
java·开发语言·面试
Fiercezm3 小时前
JUC学习
java
无尽的大道3 小时前
Java 泛型详解：参数化类型的强大之处
java·开发语言
ZIM学编程3 小时前
Java基础Day-Sixteen
java·开发语言·windows
我不是星海3 小时前
1.集合体系补充（1）
java·数据结构
放逐者-保持本心，方可放逐3 小时前
react 组件应用
开发语言·前端·javascript·react.js·前端框架
P.H. Infinity3 小时前
【RabbitMQ】07-业务幂等处理
java·rabbitmq·java-rabbitmq
爱吃土豆的程序员3 小时前
java XMLStreamConstants.CDATA 无法识别 ＜![CDATA[]]＞
xml·java·cdata
热门推荐
01聊聊 Python 中的同步原语，为什么有了 GIL 还需要同步原语02【HarmonyOS】HUAWEI DevEco Studio 下载地址汇总03Windows10安装PCL1.14.0及点云配准04C++——超强级病毒代码05全面解析：构建基于深度学习的安全帽检测系统（UI界面+YOLO代码+数据集）06组基轨迹建模 GBTM的介绍与实现（Stata 或 R）07硬件预取之空间预取08Ubuntu 20.04使用Livox mid 360 测试 FAST_LIO09Coze扣子平台完整体验和实践（附国内和国际版对比）10【SCS-CN】SCS-CN模型中CN值的确定