- 博客(4)
- 收藏
- 关注
原创 Deep Forest:一种深度神经网络的替代模型架构
本篇博客主要参考了周志华老师团队在2017年IJCAI上发表的论文《Deep Forest: Towards an Alternative to Deep Neural Networks》。这篇文章的主要贡献是把深层次的神经网络的原理运用到了传统的机器学习算法“random forest”中去,并取得了和深度学习神经网络相当的效果。众所周知,现在深度学习在工业界和学术界都非常的火,各种基于卷积神经网
2017-12-16 21:35:23 6225
原创 反卷积网络在文本表征方面的应用
这篇博客主要参考了2017年NIPS会议的paper《Deconvolutional Paragraph Representation Learning》。首先值得一提的是,这篇文章是反卷积网络在文本领域的第一篇应用,(反卷积网络在2010年在paper《Deconvolutional Networks》中提出的,主要用于图像处理领域,当一个原始的图像经过卷积和反卷积操作后,就能够提取出图像中的边缘
2017-12-13 12:18:54 1731 2
原创 Line:一种适应于大型网络的network Embedding策略
这篇博客主要参考了唐建在2015年WWW会议上的论文《LINE: Large-scale Information Network Embedding》。这篇论文也是我2017年7月份在MSRA实习的时候通过微软内部的技术分享听到的,当时也是唐建本人直接讲的,话不多说开始直接讲模型。正如题目所说的,line这个模型就是把一个大型网络中的节点根据其关系的疏密程度映射到向量空间中去,使联系紧密的节点被投射
2017-12-07 16:36:11 9048 5
原创 一种通过self-attention机制生成多维度aspect的句向量模型
这篇博客主要借鉴了IBM沃森实验室的2017年ICLR会议的论文《A STRUCTURED SELF-ATTENTIVE SENTENCE EMBEDDING》。根据self-attention机制生成针对一个句子的多维度表征向量。就我个人来看,过去一提到attention这种基于注意力的模型,特别是用在情感分类方面,一般来说一定要和一个具体的任务联系在一起,这样才有attention的对象,比方说
2017-12-03 15:14:39 5578
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人