Java同时处理多个数据的方法详解

于 2024-05-22 10:40:03 发布
阅读量972 收藏 12
点赞数 15
文章标签： java 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_72958694/article/details/139113539
版权

在Java中，同时处理多个数据通常涉及多线程、并发编程或异步编程。这里我将提供一个使用多线程的示例，因为多线程是处理多个数据并行的常见方式。

首先，我们需要定义一个任务（例如，处理一个数据项），然后创建多个线程来并行执行这些任务。

1.使用多线程处理多个数据

假设我们有一个整数列表，并且我们想要并行地对列表中的每个整数执行某个操作（例如，计算平方）。

（1）定义任务：我们可以创建一个实现Runnable接口的类来表示任务。

（2）创建线程：对于列表中的每个数据项，我们创建一个新的线程来执行该任务。

（3）启动线程：调用线程的start()方法来启动线程。

（4）等待线程完成：如果需要，我们可以使用join()方法来等待所有线程完成。

下面是完整的代码示例：

import java.util.ArrayList;  
import java.util.List;  
  
public class MultiDataProcessingExample {  
  
    // 定义任务：计算整数的平方  
    static class SquareTask implements Runnable {  
        private int number;  
  
        public SquareTask(int number) {  
            this.number = number;  
        }  
  
        @Override  
        public void run() {  
            int square = number * number;  
            System.out.println("The square of " + number + " is " + square);  
        }  
    }  
  
    public static void main(String[] args) {  
        // 创建一个整数列表  
        List<Integer> numbers = new ArrayList<>();  
        for (int i = 1; i <= 10; i++) {  
            numbers.add(i);  
        }  
  
        // 为每个整数创建一个线程来计算平方  
        List<Thread> threads = new ArrayList<>();  
        for (int number : numbers) {  
            Thread thread = new Thread(new SquareTask(number));  
            threads.add(thread);  
            thread.start(); // 启动线程  
        }  
  
        // 等待所有线程完成（可选）  
        for (Thread thread : threads) {  
            try {  
                thread.join();  
            } catch (InterruptedException e) {  
                e.printStackTrace();  
            }  
        }  
  
        // 所有线程都已完成，继续主线程的其他操作（如果有的话）  
        System.out.println("All threads have finished.");  
    }  
}

在这个示例中，我们定义了一个SquareTask类来实现Runnable接口，该类表示计算整数平方的任务。然后，在main方法中，我们创建了一个包含1到10的整数的列表，并为列表中的每个整数创建了一个新的线程来执行SquareTask。最后，我们启动了所有线程，并（可选地）等待它们完成。

2.使用JavaExecutorService和Callable接口来处理多个数据示例

下面是一个使用Java的ExecutorService和Callable接口来处理多个数据的示例。在这个例子中，我们将使用ExecutorService来管理线程池，并使用Future来获取每个任务的结果。

首先，我们定义一个实现Callable接口的任务，它返回计算后的结果。然后，我们创建一个ExecutorService，提交多个任务，并使用Future对象来收集结果。

import java.util.ArrayList;  
import java.util.List;  
import java.util.concurrent.*;  
  
public class MultiDataProcessingWithExecutorService {  
  
    // 定义任务：计算整数的平方并返回结果  
    static class SquareCallable implements Callable<Integer> {  
        private final int number;  
  
        public SquareCallable(int number) {  
            this.number = number;  
        }  
  
        @Override  
        public Integer call() throws Exception {  
            int square = number * number;  
            return square;  
        }  
    }  
  
    public static void main(String[] args) throws ExecutionException, InterruptedException {  
        // 创建一个整数列表  
        List<Integer> numbers = new ArrayList<>();  
        for (int i = 1; i <= 10; i++) {  
            numbers.add(i);  
        }  
  
        // 创建一个固定大小的线程池  
        ExecutorService executorService = Executors.newFixedThreadPool(5);  
  
        // 提交任务并获取Future列表  
        List<Future<Integer>> futures = new ArrayList<>();  
        for (int number : numbers) {  
            Future<Integer> future = executorService.submit(new SquareCallable(number));  
            futures.add(future);  
        }  
  
        // 获取并打印每个任务的结果  
        for (Future<Integer> future : futures) {  
            // 注意：get()方法会阻塞，直到任务完成  
            Integer result = future.get();  
            System.out.println("The square of " + (futures.indexOf(future) + 1) + " is " + result);  
        }  
  
        // 关闭线程池  
        executorService.shutdown();  
  
        // 等待所有任务完成（如果还没有完成的话）  
        try {  
            // 等待线程池中的任务在指定的时间内完成  
            if (!executorService.awaitTermination(60, TimeUnit.SECONDS)) {  
                // 线程池没有在给定的时间内终止，我们可以选择取消它  
                executorService.shutdownNow();  
            }  
        } catch (InterruptedException ie) {  
            // 当前线程在等待过程中被中断  
            executorService.shutdownNow();  
            Thread.currentThread().interrupt();  
        }  
  
        // 所有线程都已完成，继续主线程的其他操作（如果有的话）  
        System.out.println("All threads have finished.");  
    }  
}

在这个示例中，我们使用Executors.newFixedThreadPool(5)创建了一个包含5个线程的线程池。然后，我们为列表中的每个整数提交了一个SquareCallable任务，并将返回的Future对象保存在列表中。通过调用future.get()方法，我们可以获取每个任务的结果，并打印出来。最后，我们关闭了线程池，并等待所有任务完成。

使用ExecutorService和Callable通常比直接使用Thread和Runnable更加方便和灵活，因为ExecutorService提供了对线程池的管理，而Callable允许任务返回结果。

3.使用并发编程同时处理多个数据

在Java并发编程中，一种常见的方法是使用ExecutorService和Callable接口来同时处理多个数据，并收集结果。以下是一个完整的代码示例，展示了如何使用ExecutorService和Future来同时处理一个整数列表中的每个元素，并收集它们的平方结果：

import java.util.ArrayList;  
import java.util.List;  
import java.util.concurrent.*;  
  
public class ConcurrentSquareCalculator {  
  
    // 定义一个Callable任务来计算平方  
    static class SquareCallable implements Callable<Integer> {  
        private final int number;  
  
        public SquareCallable(int number) {  
            this.number = number;  
        }  
  
        @Override  
        public Integer call() throws Exception {  
            return number * number;  
        }  
    }  
  
    public static void main(String[] args) throws ExecutionException, InterruptedException {  
        // 创建一个整数列表  
        List<Integer> numbers = new ArrayList<>();  
        for (int i = 1; i <= 10; i++) {  
            numbers.add(i);  
        }  
  
        // 创建一个固定大小的线程池  
        ExecutorService executorService = Executors.newFixedThreadPool(5);  
  
        // 提交任务并收集Future对象  
        List<Future<Integer>> futures = new ArrayList<>();  
        for (int number : numbers) {  
            Future<Integer> future = executorService.submit(new SquareCallable(number));  
            futures.add(future);  
        }  
  
        // 等待所有任务完成并收集结果  
        List<Integer> squares = new ArrayList<>();  
        for (Future<Integer> future : futures) {  
            // 注意：get()方法会阻塞，直到任务完成  
            Integer square = future.get();  
            squares.add(square);  
        }  
  
        // 打印结果  
        for (int i = 0; i < numbers.size(); i++) {  
            System.out.println("The square of " + numbers.get(i) + " is " + squares.get(i));  
        }  
  
        // 关闭线程池  
        executorService.shutdown();  
  
        // 等待线程池中的任务都执行完毕  
        try {  
            if (!executorService.awaitTermination(60, TimeUnit.SECONDS)) {  
                // 线程池没有在给定的时间内终止，可以选择取消它  
                executorService.shutdownNow();  
            }  
        } catch (InterruptedException ie) {  
            // 当前线程在等待过程中被中断  
            executorService.shutdownNow();  
            Thread.currentThread().interrupt();  
        }  
  
        // 所有线程都已完成，继续主线程的其他操作（如果有的话）  
        System.out.println("All threads have finished.");  
    }  
}

在这个示例中，我们创建了一个SquareCallable类，它实现了Callable<Integer>接口，用于计算一个整数的平方。然后，在main方法中，我们创建了一个包含1到10的整数的列表，并创建了一个大小为5的固定线程池。

接下来，我们遍历整数列表，为每个整数创建一个SquareCallable任务，并提交给线程池执行。线程池会管理这些任务的执行，并返回Future对象，这些对象可以用于获取任务的结果。

我们将这些Future对象收集到一个列表中，并遍历这个列表，使用get()方法来获取每个任务的结果，并将结果收集到另一个列表中。注意，get()方法会阻塞，直到任务完成并返回结果。

最后，我们打印出每个原始数字的平方结果，并关闭线程池。我们还使用awaitTermination方法来等待线程池中的所有任务都执行完毕，以确保所有资源都被正确释放。

4.使用异步编程同时处理多个数据

在Java中进行异步编程以同时处理多个数据的一种常见方式是使用CompletableFuture。CompletableFuture是Java 8中引入的一个功能强大的类，它代表了一个异步计算的结果。以下是一个使用CompletableFuture来同时处理多个数据的示例：

import java.util.ArrayList;  
import java.util.List;  
import java.util.concurrent.CompletableFuture;  
import java.util.concurrent.ExecutionException;  
import java.util.stream.Collectors;  
  
public class AsyncProcessingExample {  
  
    // 一个方法用于模拟计算平方  
    public static int square(int number) {  
        // 假设这里有一些计算  
        try {  
            // 模拟耗时操作  
            Thread.sleep(1000);  
        } catch (InterruptedException e) {  
            Thread.currentThread().interrupt();  
        }  
        return number * number;  
    }  
  
    public static void main(String[] args) throws ExecutionException, InterruptedException {  
        // 创建一个整数列表  
        List<Integer> numbers = List.of(1, 2, 3, 4, 5);  
  
        // 使用stream和CompletableFuture.supplyAsync来异步处理每个数字  
        List<CompletableFuture<Integer>> futures = numbers.stream()  
                .map(number -> CompletableFuture.supplyAsync(() -> square(number)))  
                .collect(Collectors.toList());  
  
        // 使用CompletableFuture.allOf等待所有Future完成  
        CompletableFuture<Void> allFutures = CompletableFuture.allOf(futures.toArray(new CompletableFuture[0]));  
  
        // 等待所有任务完成  
        allFutures.join();  
  
        // 收集结果  
        List<Integer> squares = futures.stream()  
                .map(future -> {  
                    try {  
                        return future.get(); // 这可能会抛出异常，但在这个例子中我们假设没有异常  
                    } catch (InterruptedException | ExecutionException e) {  
                        throw new IllegalStateException(e);  
                    }  
                })  
                .collect(Collectors.toList());  
  
        // 打印结果  
        squares.forEach(System.out::println);  
    }  
}

在这个示例中，我们首先创建了一个包含整数的列表。然后，我们使用Java 8的流（Stream）API和CompletableFuture.supplyAsync来异步处理列表中的每个数字。supplyAsync方法会返回一个CompletableFuture，它代表异步计算的结果。

我们收集所有的CompletableFuture到一个列表中，并使用CompletableFuture.allOf来等待所有的Future完成。allOf方法返回一个新的CompletableFuture<Void>，当所有给定的Future都完成时，这个新的Future就完成了。

然后，我们调用join()方法来等待所有的Future完成。join()方法会阻塞当前线程，直到Future完成。

最后，我们再次使用流来从每个CompletableFuture中获取结果，并将它们收集到一个新的列表中。我们使用get()方法来获取结果，但请注意，如果Future的计算抛出异常，get()方法也会抛出异常。在这个例子中，我们假设没有异常，但在实际应用中，你应该妥善处理这些异常。

最后，我们打印出计算得到的平方数。

Tech Synapse
关注
  • 15
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值