NLP
NLP (Natural Language Processing) 是人工智能（AI）的一个子领域。自然语言是人类智慧的结晶，自然语言处理是人工智能中最为困难的问题之一，而对自然语言处理的研究也是充满魅力和挑战的。
作者介绍
心比天高，脚踏实地。
不忘初心，不畏将来。
-
原创
ML之NB&LoR：利用NB(朴素贝叶斯)、LoR(逻辑斯蒂回归)算法(+TfidfVectorizer)对Rotten Tomatoes影评数据集进行文本情感分析—五分类预测
ML之NB&LoR：利用NB(朴素贝叶斯)、LoR(逻辑斯蒂回归)算法(+TfidfVectorizer)对Rotten Tomatoes影评数据集进行文本情感分析—五分类预测 目录 输出结果 设计思路 核心代码 输出结果 数据集详见：Dataset之Rotten Tomatoes：Rotten Tomatoes影评数据集简...2019-02-19 14:20:29 阅读数 3676 评论数 0 -
原创
ML之NB&LoR：利用NB(朴素贝叶斯)、LoR(逻辑斯蒂回归)算法(+CountVectorizer)对Rotten Tomatoes影评数据集进行文本情感分析—五分类预测
ML之NB&LoR：利用NB(朴素贝叶斯)、LoR(逻辑斯蒂回归)算法(+CountVectorizer)对Rotten Tomatoes影评数据集进行文本情感分析—五分类预测 目录 输出结果 数据集 设计思路 核心代码 输出结果 数据集详见：Dataset之Rotten Tomatoes：Rotten Tomatoes影评数...2019-02-19 11:29:40 阅读数 2885 评论数 0 -
原创
ML之NB：(NLP)基于sklearn库利用不同语种数据集训练NB(朴素贝叶斯)算法，对新语种进行语种检测
ML之NB：(NLP)基于sklearn库利用不同语种数据集训练NB(朴素贝叶斯)算法，对新语种进行语种检测 目录 输出结果 训练数据集 设计思路 核心代码 输出结果 测试01：I love you 测试02：Ich liebe dich 训练数据集 数据集下载：不同语种训练数据集Language_data ...2019-02-18 22:46:45 阅读数 3717 评论数 0 -
原创
NLP之TM之LDA：利用LDA算法瞬时掌握文档的主题内容—利用希拉里邮件数据集训练LDA模型并对新文本进行主题分类
NLP之TM之LDA：利用LDA算法瞬时掌握文档的主题内容—利用希拉里邮件数据集训练LDA模型并对新文本进行主题分类 目录 输出结果 设计思路 核心代码 训练数据集 LDA模型应用 输出结果 设计思路 核心代码 lda = gensim.models.ldamodel.LdaModel(corpus=co...2019-02-18 21:02:02 阅读数 3542 评论数 0 -
原创
NLP之TEA：基于SnowNLP实现自然语言处理之对输入文本进行情感分析(分词→词性标注→拼音&简繁转换→情感分析→测试)
NLP之TEA：基于SnowNLP实现自然语言处理之对输入文本进行情感分析(分词→词性标注→拼音&简繁转换→情感分析→测试) 目录 NLP分词 NLP词性标注 NLP情感分析—TEA NLP常见功能(输出拼音、支持方法) NLP测试 NLP分词 sentence = u"今年春节档的电影，我尤其喜欢吴京主演...2019-02-17 20:21:51 阅读数 4311 评论数 0 -
原创
NLP之TEA：自然语言处理之文本情感分析的简介、算法、应用、实现流程方法、案例应用之详细攻略
NLP之TEA：自然语言处理之文本情感分析的简介、算法、应用、实现流程、实现方法之详细攻略 目录 TEA的简介 TEA的应用 TEA的实现流程 TEA的实现方法 T1、词袋模型 TEA的案例应用 TEA的简介 文本情感分析：又称意见挖掘、倾向性分析等。简单而言,是对带有情感色彩的主观性文本进行分析、处理、归纳和推理的过程。互联网(如博客和...2019-02-17 13:08:14 阅读数 5158 评论数 0 -
原创
NLP之情感分析：基于python编程(jieba库)实现中文文本情感分析(得到的是情感评分)
NLP之情感分析：基于python编程(jieba库)实现中文文本情感分析(得到的是情感评分) 输出结果 1、测试对象 data1= '今天上海的天气真好！我的心情非常高兴！如果去旅游的话我会非常兴奋！和你一起去旅游我会更加幸福！' data2= '今天上海天气真差,非常讨厌下雨,把我冻坏了,心情太不高兴了,不高兴,我真的很生气！' data3= '美国华裔科学家,祖籍江苏扬州市高邮县,...2018-12-06 20:47:01 阅读数 22069 评论数 771 -
原创
NLP之TFTS读入数据：TF之TFTS读入时间序列数据的几种方法
NLP之TFTS读入数据：TF之TFTS读入时间序列数据的几种方法 目录 T1、从Numpy 数组中读入时间序列数据 T2、从csv文件中读入时间序列数据 T1、从Numpy 数组中读入时间序列数据 1、设计思路 2、输出结果 {'times': array([ 0, 1, 2, 3, 4, 5, 6, 7, 8, ...2018-10-16 15:58:02 阅读数 6886 评论数 0 -
原创
NLP之WE之Skip-Gram：基于TF利用Skip-Gram模型实现词嵌入并进行可视化、过程全记录
NLP之WE之Skip-Gram：基于TF利用Skip-Gram模型实现词嵌入并进行可视化 目录 输出结果 代码设计思路 代码运行过程全记录 输出结果 代码设计思路 代码运行过程全记录 3081 originated -> 12 as 3081 originated -> 5234 anarchism 12 as -&g...2018-10-15 15:34:58 阅读数 7278 评论数 1 -
原创
NLP之WE之CBOW&Skip-Gram：CBOW&Skip-Gram算法概念相关论文、原理配图、关键步骤详细攻略
NLP之WE之CBOW&Skip-Gram：CBOW&Skip-Gram算法相关论文、原理配图、关键步骤详细攻略 目录 CBOW&Skip-Gram算法相关论文 CBOW&Skip-Gram算法原理配图 CBOW&Skip-Gram算法关键步骤 CBOW&Skip-Gram算法相关论文 CBOW 模型和Ski...2018-10-15 15:15:00 阅读数 8095 评论数 0 -
原创
DL之RNN：基于TF利用RNN实现简单的序列数据类型(DIY序列数据集)的二分类(线性序列&随机序列)
DL之RNN：基于TF利用RNN实现简单的序列数据类型(DIY序列数据集)的二分类(线性序列&随机序列) 目录 序列数据类型&输出结果 设计思路 序列数据类型&输出结果 1、test01：training_iters = 1000000 (32, 20, 1) [[0.336], [0.337], [0.338], [0.339],...2018-10-14 11:20:49 阅读数 7713 评论数 0 -
原创
DL之RNN：人工智能为你写歌词(林夕写给陈奕迅)——基于TF利用RNN算法实现【机器为你作词】、训练&测试过程全记录
DL之RNN：人工智能为你写歌词(林夕写给陈奕迅)——基于TF利用RNN算法实现【机器为你作词】、训练&测试过程全记录 目录 输出结果 模型监控 训练、测试过程全记录 训练的数据集 输出结果 1、test01 你的背包 一个人过我 谁不属了 不甘心 不能回头 我的背包载管这个 谁让我们是要不可 但求跟你过一生 你把我灌醉 即使嘴角从...2018-10-14 09:05:33 阅读数 7480 评论数 0 -
原创
DL之RNN：人工智能为你写周董歌词——基于TF利用RNN算法实现【机器为你作词】、训练&测试过程全记录
DL之RNN：人工智能为你写周董歌词——基于TF利用RNN算法实现~机器为你作词~、训练&测试过程全记录 目录 输出结果 模型监控 训练、测试过程全记录 训练的数据集 输出结果 1、test01 夕海 而我在等待之光 在月前被画面 而我心碎 你的个世纪 你的时间 我在赶过去 我的不是你不会感觉妈妈 我说不要不要说 我会爱你 我不要你不会...2018-10-13 21:24:42 阅读数 7289 评论数 1 -
原创
DL之RNN：人工智能为你写代码——基于TF利用RNN算法实现生成编程语言代码(C++语言)、训练&测试过程全记录
DL之RNN：基于TF利用RNN算法实现生成编程语言代码(C语言)、训练&测试过程全记录 目录 输出结果 监控模型 训练&测试过程全记录 训练的数据集展示 输出结果 1、test01 ,&&curses = 0; if (tsk->state_perf_event_set &&...2018-10-13 20:38:43 阅读数 7324 评论数 0 -
原创
DL之RNN：人工智能为你写诗——基于TF利用RNN算法实现【机器为你写诗】、训练&测试过程全记录
DL之RNN：基于TF利用RNN算法实现~机器为你写诗~、测试过程全记录 目录 输出结果 模型监控 训练、测试过程全记录 训练的数据集 输出结果 1、test01 <unk><unk>风下，天上不相逢。 一人不得别，不得不可寻。 何事无时事，谁知一日年。 一年多旧国，一处不相寻。 白发何人见，清辉自有人。 何当不知事，相送不相...2018-10-13 20:31:25 阅读数 7533 评论数 0 -
原创
DL之RNN：人工智能为你写小说——基于TF利用RNN算法训练数据集(William Shakespeare的《Coriolanus》)替代你写英语小说短文、训练&测试过程全记录
DL之RNN：基于TF利用RNN算法训练数据集(William Shakespeare的《Coriolanus》)替代你写英语小说短文、测试过程全记录 目录 输出结果 监控模型 训练过程全记录 训练的数据集 输出结果 1、test01 conce alone, Which treason thines, and true a mercy wit...2018-10-13 17:59:11 阅读数 7941 评论数 0 -
原创
ML之分类预测：基于机器学习和数据科学下分类预测的简介、关键步骤(混淆矩阵/ROC等及其代码)、案例应用之详细攻略
ML之分类预测：基于机器学习和数据科学下分类预测的简介、关键步骤(混淆矩阵/ROC等及其代码)、案例应用之详细攻略 目录 分类预测的简介 分类预测的关键步骤 分类预测的案例应用 分类预测的简介 分类预测是机器学习和数据科学领域的主要内容，分为二分类预测任务和多分类预测任务。 分类预测的关键步骤 1、混淆矩阵 PPV...2018-09-04 10:44:11 阅读数 8895 评论数 2 -
原创
NLP之TM：基于gensim库调用20newsgr学习doc-topic分布并保存为train-svm-lda.txt、test-svm-lda.txt
NLP之TM：基于gensim库调用20newsgr学习doc-topic分布并保存为train-svm-lda.txt、test-svm-lda.txt 目录 输出结果 设计思路 核心代码 输出结果 相关出图 设计思路 核心代码 #二、基于svm算法对train.txt特征文件进行训练+test.txt文件进行分类测试，并评估...2018-08-26 11:12:32 阅读数 9003 评论数 0 -
原创
NLP之Topic Model：NB的先验概率之Dirichlet分布的应用
NLP之Topic Model：NB的先验概率之Dirichlet分布的应用 目录 1、Dirichlet骰子先验和后验分布的采样 2、稀疏Dirichlet先验的采样 1、Dirichlet骰子先验和后验分布的采样 输出结果 实现代码 import numpy as np np.set_printoptions(precision=3) diri...2018-08-25 22:33:39 阅读数 10096 评论数 0 -
原创
NLP：两种方法(自定义函数和封装函数)实现提取两人对话内容(***分隔txt文档)，并各自保存为txt文档
NLP：两种方法(自定义函数和封装函数)实现提取两人对话内容(***分隔txt文档)，并各自保存为txt文档 目录 问题探究 实现代码 问题探究 实现代码 f=open("niu.txt") interviewer=[] Qtum=[] count=1 for each_line in f: if each_line[...2018-04-21 20:06:28 阅读数 8573 评论数 0