![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
NLP
Anida_qin
算法工程师,关注机器学习,深度学习领域。CV&NLP&挖掘
展开
-
Word Embedding系列
原创 2019-12-23 23:39:31 · 184 阅读 · 0 评论 -
文案生成论文速读
欢迎交流指正 CTRL - A Conditional Transformer Language Model for Controllable Generation https://arxiv.org/pdf/1909.05858.pdf 模型应该没变, 变得是训练数据的格式,会将数据分类,每一个分类变成 比如, book x,y 或者wiki x, y。 ...原创 2019-10-30 10:51:03 · 455 阅读 · 0 评论 -
Attention机制
几篇比较好的链接 机器不学习:一文看懂Attention机制 斯坦福ppt 本文主要以问自己问题的方式去理解什么是attention,理解可能会有偏差,欢迎指正。 Attention 机制 为什么用Attention机制? 这个是由于传统的encoder-decoder模型,如何从source学习东西呢?那就是从encoder的输出决定,对于LSTM模型来讲,很大程度上依赖于最后一个hidden ...原创 2019-10-28 15:05:06 · 282 阅读 · 0 评论 -
NLP —— 中文分词
中文分词 目前主流方案 基于BiLSTM-CNN-CRF的中文分词 参考1(整个流程讲的比较好)https://www.jianshu.com/p/5fea8f42caa9 参考2(CRF理解那块讲的好)https://www.jianshu.com/p/97cb3b6db573 个人理解Bilstm利用词与词之间的关系 BiLSTM在学习较长句子时,可能因为模型容量问题丢弃一些重要信息,CNN...原创 2019-03-06 01:26:48 · 145 阅读 · 0 评论 -
NLP beamsearch 理解
BeamSearch的理解 转自知乎问题“谁能解释下seq2seq中的beam search算法过程?”高分回答 https://www.zhihu.com/question/54356960转载 2019-05-23 11:15:08 · 312 阅读 · 0 评论 -
NLP GLUE任务
CoLA: 单句的二分类问题, 判断一个英文句子在语法上是不是可接受的. SST-2 单句的二分类问题, 句子的来源于人们对一部电影的评价, 判断这个句子的情感. MRPC 句子对来源于对同一条新闻的评论. 判断这一对句子在语义上是否相同. STS-B 这是一个类似回归的问题. 给出一对句子, 使用1~5的评分评价两者在语义上的相似程度. QQP 这是一个二分类数据集. 目的...转载 2019-05-30 16:53:24 · 6130 阅读 · 2 评论 -
NLP 评价标准 - BLEU
BLEU 论文:https://aclweb.org/anthology/P02-1040.pdf 思想:数词是否在ground truth里 举例 原文:猫坐在垫子上 机器翻译:The cat sat on the mat 人工翻译:The cat is on the mat 1-gram 可以看到机器翻译6个词,有5个词命中参考译文,那么它的匹配度为 5/6. 2-gram 2元词组的匹配度则...原创 2019-06-03 10:46:02 · 1037 阅读 · 1 评论