mpi4py 中的访问文件数据方法

本文从本人简书博客同步过来

在上一篇中我们介绍了 mpi4py 中的并行文件视图操作方法，下面我们将介绍访问文件数据的相关方法。

文件访问方法

MPI 环境下应用程序对文件的访问主要有 3 种特征：定位（positioning），包括显式偏移和隐式文件指针；同步性（synchronism），主要包括阻塞、非阻塞和分步集合操作；集合性（coordination），主要包括非集合操作和集合操作。下表列出的相应的访问方法（MPI.File 类方法）反应了这些操作特征的组合，其中结合了两种类型的文件指针——独立文件指针和共享文件指针。

上表中访问文件数据的方法很多，不能在此一一详细介绍，但是它们根据访问文件的特征却有其规律性，下面我们介绍 3 种访问特征的具体含义和数据访问的基本规范：

定位（positioning）

MPI 中的文件定位有 3 种：显式偏移（explicit offset）、独立文件指针（individual file pointers）和共享文件指针（shared file pointers），相同进程中可混合使用这 3 种操作方式，彼此无影响。

所有使用显式指针的方法，其命名中都包含 “_at“ 字符，使用显式指针访问数据时，其参数为直接指定的文件偏移位置，而不必再通过任何文件指针，也与文件视图中的相对偏移位置无关。注意：这里使用偏移不需要执行 seek 操作。

所有使用独立文件指针的数据访问方法，其命名中不包含与定位有关的字符串。

所有使用共享文件指针访问数据的方法，其命名中均包含 “_shard“ 或 “_ordered“ 字符串。

对使用指针访问文件的方法而言，MPI 负责维护其文件指针，使用时要注意的关键问题是界定相应 I/O 动作何时以及如何更新文件指针。通常情况下，I/O 操作结束时会控制文件指针指向其最后一个访问过的数据项之后第一个数据项的起始位置，而非阻塞或分步集合操作的启动方法就能修改文件指针，因此有可能在实际数据访问结束之前，文件指针就已经被修改指向新的位置。

同步性（synchronism）

MPI 支持 3 种同步类型：阻塞、非阻塞以及专门用于集合数据访问函数的带约束非阻塞操作——分步集合操作