0深度学习三步走 1.神经网络 1.1全连接前馈神经网络 network的运行方式: 矩阵运算 输入input为[1 -1]的转置,权重w为二维矩阵,当经过sigmoid函数后为[0.98 0.12]的转置。 1.2 Deep的含义 深度指很多层,目前关于具体多少层才成为深度还没有明确定义,一般认为大于3层以上的隐藏层成为深度。 1.3神经网络Neural Network 简单来说,神经网络就是进行一系列的矩阵运算 1.4输出层 1.5 应用 Mnist手写识别 2.模型检验 Cross Entropy:交叉熵 使用梯度下降进行寻找最优参数