tensorflow用mat文件制作数据集_分布式TensorFlow模型

简介:

之前的学习都采用单节点的运行的方式，这次简单的学习一下分布式TensorFlow模型，分布式的TensorFlow是由高性能GRPC（google remote procedure call）框架作为底层技术支持，是一个高性能，跨平台的RPC框架，RPC协议，即远程过程调用协议，是指通过网络从远程计算机程序上请求服务。

分布式TensorFlow模型：

在分布式TensorFlow任务中，有两种重要的身份，

一种是参数服务器parameter server，主要用于任务中的参数的保存和更新，通过之前的学习可以知道，神经网络本质上就是通过损失函数来对参数调优的过程。

另一个是工作服务器worker，主要功能就是计算。那么worker中就需要创建会话，进行会话，创建文件，并执行计算。那么有一个问题，当拥有多个worker时候如何协调他们之间的工作呢，所以需要在worker中找到一个老大老协调这些问题。