- 博客(3)
- 资源 (2)
- 收藏
- 关注
原创 NLP预训练模型综述
现在深度学习越来越火了,在NLP领域主要使用CNNs、RNNs、GNNs以及attention机制。尽管这些模型取得了一些成绩,但是和CV相比,还是有些差距的,主要原因是大部分NLP任务的监督学习数据很少,而深度学习模型的参数有很多,需要大量的数据才可以学习好,否则就会发生过拟合现象,这就导致NLP模型一般都是1-3层的浅层神经网络。 近几年,预训练模型的出现在NLP领域起到里程牌的作用,NLP任务不需要从零开始训练模型了,直接在预训练模型上进行fine-tuning就可以取得...
2020-07-29 12:36:03 2134 1
原创 安装不同python版本的anaconda虚拟环境
1、如果已经安装了anaconda,比如安装了python3.6的,那么如果想继续安装python3.5的环境,可以使用如下命令:conda create -n2、如果已经安装了anaconda,比如安装了python3.6的,在python3.6的环境上安装不同的虚拟环境,那么可以使用如下命令:2.1、首先安装envirtualenvpip install envirtuale...
2020-07-14 22:03:59 1146
原创 Hopfield神经网络
单层感知器、线性神经网络、BP神经网络都属于前向神经网络,各层神经元节点接受前一层输入的数据,经过处理输出到下一层,数据正向流动,没有反馈连接。前向线性神经网络的输出仅由当前的输入和网络的权值决定,而本次分享的反馈神经网络Hopfield的输出除了与当前输入和网络权值有关以外,还与网络之前的输入有关。 1982年,美国加州理工学院的J.Hopfield教授提出了一种单层反馈神经网络,称为Hopfield网络,该网络具有比前向神经网络更强的计算能力,突出优点是具有很强的联想记忆和...
2020-07-11 14:03:38 1897
《GAN:实战生成对抗网络》_刘梦馨.pdf
2019-06-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人