NN_CTR笔记

image.png
image.png
image.png
image.png
image.png
image.png
image.png
image.png
  • FNN将FM模型训出的结果作为其中的embedding层,上面套上全连接神经网络。
  • 模型底层先用FM对经过one-hot binary编码的输入数据进行embedding,把稀疏的二进制特征向量映射到 dense real 层,之后再把dense real 层作为输入变量进行建模,这种做法成功避免了高维二进制输入数据的计算复杂度。
image.png
  • CCPM: 模型结构整体结构相对比较简单,首先将特征映射到embedding稠密向量,然后经过卷积神经网络抽取高维特征,最后通过pooling层抽取主要的高维信息。
image.png

---------------------------------------------------------------------------------

image.png
image.png
image.png
image.png
image.png
image.png
image.png
image.png
nn_seq_mms是一种使用神经网络的序列建模和预测方法。该方法主要适用于处理具有时序结构的数据,如时间序列、语音信号、文本等。 nn_seq_mms的核心思想是利用神经网络对序列中的每个元素进行建模,并通过学习序列中元素的顺序关系来预测下一个元素。该方法的输入是一个序列,每个元素通过神经网络进行编码,得到其向量表示。编码后的序列被传入一个递归神经网络(RNN)或转发神经网络(FNN)进行建模,并在模型的输出层进行预测。 在训练过程中,nn_seq_mms通过最小化预测值与真实值之间的差异来调整神经网络的参数。具体来说,可以使用梯度下降等优化算法来更新网络权重,使得预测结果逼近真实值。 nn_seq_mms的优点是能够捕捉到序列中元素之间的顺序关系,并且能够根据先前的元素预测下一个元素。此外,神经网络的非线性特性使得nn_seq_mms在处理复杂的序列数据时表现良好。 然而,nn_seq_mms也面临一些挑战。首先,由于序列数据的长度可能不一致,因此需要对其进行统一处理,例如填充或截断。此外,神经网络的训练过程通常需要大量的数据和计算资源,特别是对于较长的序列数据。 总之,nn_seq_mms是一种利用神经网络进行序列建模和预测的方法,可以应用于多个领域,如时间序列预测、语音识别和自然语言处理等。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值