李宏毅机器学习07—deep learning

一、深度学习的发展历史

二、深度学习的步骤

1.定义一个函数集，也就是神经网络（neural network）

将逻辑回归按不同的方式进行连接，得到不同的结构，逻辑回归中的w和b就是神经网络中的参数。

常见的连接方式：Fully Connect Feedforward Network（全连接前馈神经网络）

矩阵计算过程：

举例：

需要找到一个合适的网络结构，使最适合的函数在函数集里面。

 

2.定义一个函数的好坏（找到合适的参数）

调整参数使得交叉熵最小

找到——又是梯度下降