TensorFlow

TensorFlow基本思想：构造图=》执行图  lazy模式，延迟计算

神经网络代码如何看：

三部分：找到推断=》交叉熵（损失值计算）=》梯度运算（反向传播）

 

 

计算图的本质
TensorFlow的系统结构以C API为界，将整个系统分为「前端」和 「后端」两个子系统。
前端系统扮演了Client的角色，完成计算图的构造，通过转发 Protobuf格式的GraphDef给后端系统的Master，并启动计算图 的执行过程。
Master将图进行分裂，通过RegisterGraph接口，将GraphDef的 子图片段注册到Worker上。因此，GraphDef是描述计算图的
知识模型，整个TensorFlow的计算过程都是围绕GraphDef所展 开的。

计算图-节点-op

 

OpDef
OP表示某种抽象计算，它拥有0个或多个「输入/输出」，及 其0个或多个「属性」。其中，输入/输出以Tensor张量的形式存在。

在系统实现中，OP的元数据使用Protobuf格式的OpDef描述， 实现前端与后端的数据交换，及其领域模型的统一。