关闭

[NLP论文阅读] The Fixed-Size Ordinally-Forgetting Encoding Method for Neural Network Language Models

这篇文章提出了一种学习不定长序列表示的方法,并将该方法用于前反馈神经网络的语言模型(feedforward neural network language models, FNN-LMs),得到了不错的实验数据。...
阅读(14) 评论(0)

[NLP论文阅读] Word Embedding based on Fixed-Size Ordinally Forgetting Encoding

EMNLP刚刚结束,在浏览accepted paper后,选择了几篇作为近期的论文阅读。之前一直看的都是句子建模的文章,这次换了换口味,看看词向量建模的最近工作。...
阅读(14) 评论(0)

[NLP论文阅读] Learning Paraphrastic Sentence Embeddings from Back-Translated Bitext

这篇文章的目的是学习句子表示,在产生模型的训练集时作者所采用的方法很有意思,作者利用训练好的机器翻译模型将原数据集中非英语的句子翻译成英语,从而和原数据集的英语句子组成意义相近的句子对,得到大量的训练数据,通过这些训练数据训练学习句子表示的模型。...
阅读(88) 评论(0)

[NLP论文阅读] Supervised Learning of Universal Sentence Representations from NLI data

这篇文章感觉上我上一篇博客中阅读的论文在想法上有相似的地方,想法都是你要达到目标,你必须先会点别的。http://write.blog.csdn.net/mdeditor#...
阅读(109) 评论(0)

[NLP论文阅读] Discourse-Based Objectives for Fast Unsupervised Sentence Representation Learning

这篇文章的想法很有意思,为了学习到更好的句子表示,作者没有去设计新的模型来学习句子表示,而是设计了3个预训练目标来预训练已有的句子编码器(Sentence encoder),当模型经过这3个预训练后在针对目标任务进行训练。...
阅读(47) 评论(0)

[NLP论文阅读]Learned in Translation: Contextualized Word Vectors

上下文相关词向量的一个新模型。...
阅读(182) 评论(0)

[NLP论文阅读]Siamese CBOW: OptimizingWord Embeddings for Sentence Representations

前段时间看了一篇Siamese LSTM(孪生LSTM)用于生产句子表示的论文,这次又看到了这一篇文章,感觉也很有意思,这篇文章是借鉴了CBOW模型的想法提出了Siamese CBOW模型,并且取得了不错的效果。...
阅读(246) 评论(0)

[NLP论文阅读]A simple but tough-to-beat baseline for sentence embedding

在神经网络泛滥的时候,这篇文章像一股清流,提出了一个无监督的句子建模方法,并且给出了该方法的一些理论解释。通过该方法得到的句子向量,在STS数据集上取得了不输给神经网络的效果。...
阅读(900) 评论(4)

tf.placeholder()使用中的一些问题

这是除了看视频学习之外,我第一次自己对Tensorflow框架进行实践,确实也遇到了一些比较让人难受的问题,特此记录。...
阅读(2068) 评论(0)

SiameseLSTM论文阅读及其Tensorflow实现

原文作者主要为针对短语/句子/序列的相似性比较提出了一种评价模型——Siamese LSTM(孪生网络)。该模型是输入为句子对,输出为输入句子对的相似性得分(得分为1-5)。该模型在SemEval 2014数据集上取得了state-of-art的结果。...
阅读(750) 评论(2)

[NLP论文阅读]A Neural Knowledge Language Model(一)

通过将语言模型与知识图谱相结合在一定程度上解决了unknown word的问题。...
阅读(266) 评论(0)

[NLP论文阅读]LightRNN: Memory and Computation-Efficient Recurrent Neural Networks

这是对LightRNN模型论文的笔记,本文中创新的将词表示从一维向量变成了由行列向量组成的矩阵,同时由于用一行/列的单词会共享行/列向量,这大大减少了对空间的要求,很有启发。...
阅读(240) 评论(0)

[NLP论文阅读]Distributed Representations of Sentences and Documents

句子、文档的分布式表示 论文阅读...
阅读(234) 评论(0)

几篇神经网络训练语言模型文章的阅读

本文主要对这几周读的几篇关于使用神经网络构建语言模型的论文进行总结。...
阅读(681) 评论(0)

我的linux菜鸟之路3

文件和目录管理的一些命令的简介。...
阅读(144) 评论(0)
18条 共2页1 2 下一页 尾页
    个人资料
    • 访问:6455次
    • 积分:233
    • 等级:
    • 排名:千里之外
    • 原创:18篇
    • 转载:0篇
    • 译文:0篇
    • 评论:6条
    文章分类
    最新评论