MPI Tutorial笔记(一) Start

MPI 对于消息传递模型的设计

MPI 在消息传递模型设计上的一些经典概念。

1. 第一个概念是_通讯器_（communicator）:
   通讯器定义了一组能够互相发消息的进程。在这组进程中，每个进程会被分配一个序号，称作秩（rank），进程间显性地通过指定秩来进行通信

2. 通信的基础建立在不同进程间发送和接收操作 :
   一个进程可以通过指定另一个进程的秩以及一个独一无二的消息标签（tag）来发送消息给另一个进程。接受者可以发送一个接收特定标签标记的消息的请求（或者也可以完全不管标签，接收任何消息），然后依次处理接收到的数据。类似这样的涉及一个发送者以及一个接受者的通信被称作__点对点__（point-to-point）通信。

3. 某个进程可能需要跟所有其他进程通信。(Broadcast)!!
   比如主进程想发一个广播给所有的子进程。在这种情况下，手动去写一个个进程点对点的信息传递就显得很笨拙。而且事实上这样会导致网络利用率低下。MPI 有专门的接口来帮我们处理这类所有进程间的集体性（collective）通信。

把点对点通信和集体性通信这两个机制合在一起已经可以创造十分复杂的并发程序了。事实上，这两个功能已经强大到我现在不需要再介绍任何 MPI 高级的特性了