语言模型
lucky_ricky
这个作者很懒,什么都没留下…
展开
-
解读tensorflow之rnn 的示例 ptb_word_lm.py
from:http://www.cnblogs.com/welhzh/p/6739370.html这两天想搞清楚用tensorflow来实现rnn/lstm如何做,但是google了半天,发现tf在rnn方面的实现代码或者教程都太少了,仅有的几个教程讲的又过于简单。没办法,只能亲自动手一步步研究官方给出的代码了。本文研究的代码主体来自官方源码ptb-word-lm。但是,如果你转载 2017-09-13 17:41:47 · 620 阅读 · 0 评论 -
斯坦福大学自然语言处理第四课 语言模型(Language Modeling)笔记
一、课程介绍斯坦福大学于2012年3月在Coursera启动了在线自然语言处理课程,由NLP领域大牛Dan Jurafsky 和 Chirs Manning教授授课:https://class.coursera.org/nlp/以下是本课程的学习笔记,以课程PPT/PDF为主,其他参考资料为辅,融入个人拓展、注解,抛砖引玉,欢迎大家在“我爱公开课”上一起探讨学习。课件汇转载 2017-08-31 10:46:10 · 2513 阅读 · 0 评论 -
中文文本挖掘预处理流程总结
from:http://www.cnblogs.com/pinard/p/6744056.html在对文本做数据分析时,我们一大半的时间都会花在文本预处理上,而中文和英文的预处理流程稍有不同,本文就对中文文本挖掘的预处理流程做一个总结。1. 中文文本挖掘预处理特点 首先我们看看中文文本挖掘预处理和英文文本挖掘预处理相比的一些特殊点。 首先,中文文本是没有像英文的转载 2017-10-12 23:51:37 · 8755 阅读 · 1 评论 -
文本挖掘的分词原理
from : http://www.cnblogs.com/pinard/p/6677078.html 在做文本挖掘的时候,首先要做的预处理就是分词。英文单词天然有空格隔开容易按照空格分词,但是也有时候需要把多个单词做为一个分词,比如一些名词如“New York”,需要做为一个词看待。而中文由于没有空格,分词就是一个需要专门去解决的问题了。无论是英文还是中文,分词的原理都是类似的,本文就转载 2017-10-12 23:55:28 · 8440 阅读 · 0 评论