- 博客(4)
- 收藏
- 关注
原创 Linux下远程连接Jupyter+pyspark部署教程
博主最近试在服务器上进行spark编程,对于一个追(懒)求(到)便(极)利(致)的人来说,没有一个良好的编程环境,又怎能爆发出心中的小宇宙,最多也就是爆出几条草泥马。因此,在开始编程作业之前,要先搭建一个便利的编程环境,这样才能做到舒心地开发。本文主要有以下内容: 1、python多版本管理利器-pythonbrew 2、Jupyter notebooks 安装与使用以及远程连接方法 3、Ju
2016-04-28 11:39:52
7324
3
转载 主题模型及其在文本情感分析中的应用
随着Web2.0技术的出现和发展,互联网上(包括门户网站、电子商务网站、社交网站、音/视频分享网站、论坛、博客、微博等)产生了海量的、由用户发表的对于诸如人物、事件、产品等目标实体的评论信息。例如,下面这两个短文本评论:(1)“比较了多个智能手机后选择了8150,性价比还可以。另外,就是考虑到它是3.7的屏幕,大小比较合适,否则携带很不方便。”(京东商城用户,2011.11.25);(2)“我以前在
2016-03-25 18:06:14
8083
原创 教你读懂协方差
在讲述协方差之前,我们先来回顾一下统计里最基本的概念:样本均值,方差和标准差。 均值: 标准差: 方差: 很显然,均值描述的是样本集合的中间点,它告诉我们的信息是很有限的,而标准差给我们描述的则是样本集合的各个样本点到均值的距离之平均。以这两个集合为例,[9,1,10,20]和[7,4,13,16],两个集合的均值都是10,但显然两个集合差别是很大的,计算两者的标准差,前者是6.7,
2016-03-24 18:28:25
1235
原创 情感分析利器——Doc2vec
情感分析是自然语言处理(NLP)中的常见的方法应用,是文本分析的一种。所谓文本分析指的是从文字来源中推导出知识和洞见的过程。而情感分析则进一步从文字中自动识别出人们对特定主题的主观看法、情绪以及态度等等资讯。尽管情绪在很大程度上是主观的,但是情感量化分析已经有很多有用的实践,比如企业分析消费者对产品的反馈信息,或者检测在线评论中的差评信息。 比较简单的情感分析方法利用词语的正
2016-03-24 14:37:07
29145
11
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人