![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
自然语言处理
文章平均质量分 98
从RNN系列到BERT预训练模型的应用
总是重复名字我很烦啊
CSDN平台几乎不再更新,相关内容更新和汇总请跳转个人博客主页:https://hardhash.github.io/dale/#/
展开
-
WaveNet因果卷积和Transformer架构分析
transformerWaveNet-卷积网络在NLP中的跨界应用何为因果卷积何为扩张卷积Transformer架构分析输入部分词嵌入层nn.Embedding位置编码positional encoding输出部分编码器部分Attention机制残差层掩码张量多头自注意力层解码器部分WaveNet-卷积网络在NLP中的跨界应用2017年Google提出《WaveNet: Google Assistant’s Voice Synthesizer》,这是一个基于一维卷积的时序处理算法,并且应用到了Googl原创 2023-06-05 23:34:36 · 1738 阅读 · 1 评论 -
基于GRU的seq2seq英译法
基于GRU的seq2seq英译法第一步、导入必备工具包第二步、数据处理字符规范化读取数据筛选我们需要的主语+be动词简单句编码第三步、撰写GRU encoder第四步、撰写GRU decoder第五步、训练模型效果分析调优引入Attention机制做解码器Attention-GRU decoder效果分析BERT预编码baseline到bert模型效果对比其他办法项目介绍:这里有一份英译法的数据集,我们要做的就是学习这个数据集,生成一个英译法的翻译器。为了简化,我们就训练一个很简单的主语+be动词结构的句原创 2022-01-16 15:29:09 · 1300 阅读 · 0 评论 -
基于RNN系列的人名分类器【数据处理-训练-预测-评估-调优】
RNN、LSTM、GRU的分类器原创 2022-01-15 18:06:43 · 1788 阅读 · 0 评论 -
NLP从0开始
NLP从0梳理原创 2022-01-15 15:30:22 · 1534 阅读 · 0 评论