Java Master-Worker模式

最新推荐文章于 2021-09-25 19:59:34 发布

原创

最新推荐文章于 2021-09-25 19:59:34 发布 · 2.7k 阅读

6 ·

CC 4.0 BY-SA版权

文章标签：

#java #并行计算 #master #worker

Master-Worker模式是并行计算的一种常见架构，Java中通过`java.util.concurrent`包实现线程安全。Master进程分配任务，Worker进程处理任务并返回结果，提高系统效率。本文介绍了Master和Worker的职责以及如何使用Java实现这一模式。

Master-Worker 模式是常用的并行计算模式。它的核心思想是系统由两类进程协作工作：Master 进程和 Worker 进程。Master 负责接收和分配任务，Worker 负责处理子任务。当各个 Worker 子进程处理完成后，会将结果返回给 Master , 由 Master 进行归纳和总结。其好处是能将一个大任务分解成若干个小任务，并行执行，从而提高系统的吞吐量。

这里写图片描述

整理流程就是上图所表示的，这里涉及到了多个线程同时操作任务。所以，我们需要用到 java.util.concurrent 包下的几个线程安全的集合。

ConcurrentLinkedQueue , ConcurrentHashMap

模拟基础的任务对象：

public class Task {
    private int id;
    private String name;

    public Task(int id, String name) {
        this.id = id;
        this.name = name;
    }

    public int getId() {
        return id;
    }

    public void setId(int id) {
        this.id = id;
    }

    public String getName() {
        return name;
    }

    public void setName