神经网络模型,应用程序,优化器和示例代码
在此之前,请先阅读第一个教程(神经网络入门):神经网络简介
介绍
在这一部分中,我们将讨论神经网络的类型及其应用,最常用的模型,优化方法和简单的示例代码。在接下来的部分中,我们将深入研究特定模型的备忘单,例如CNN和RNN。
类型和主要特点
卷积神经网络(CNN):具有一层或多层卷积层,然后是一层或多层全连接层
递归神经网络(RNN):单元之间的连接具有定向循环
长短期记忆(LSTM):RNN的类型,可以持续很长时间的短期记忆模型
生成对抗网络(GAN):两个神经网络相互竞争的系统
前馈神经网络:节点之间的连接没有循环
多层感知器(MLP):至少具有三层节点
自组织地图(SOM):将输入数据转换为低维空间
深度信仰网络(DBN):各层之间有连接,但各层之间没有连接
尖刺神经网络(SNN):以尖峰的形式处理时间信息,并且神经元之间存在多个突触
小波神经网络:使用小波函数作为神经元中的激活函数
小波卷积神经网络:结合小波变换和CNN
这是一个描绘了我们在两个主题中讨论过的许多类型和模型的体系结构的图。CNN的架构有些复杂,我们将在下一个主题中进行讨论。
任务/应用程序和最常用的网络
任务最常用的型号图片分类有线电视新闻网影像识别有线电视新闻网时间序列预测RNN,LSTM文字产生RNN