机器学习( Machine Learning)
Darkness303
爱科学,爱祖国!!
展开
-
Ubuntu下搭建spark集群开发环境
之前在windows下搭建了一个spark的开发环境,但是后来发现如果想要搞spark streaming的例子的话在Linux下使用更方便,于是在Ubuntu下面搭建一下spark开发环境,记录以做备忘之用。 1 .首先去spark官网下载相关软件,我这里用的是spark2.1.0版本http://spark.apache.org/downloads.html,对应的hadoop版本是2.7.原创 2017-10-23 12:10:24 · 1875 阅读 · 0 评论 -
hadoop-2.7.4完全分布式集群部署 外加测试例子mapreduce
更改系统时区(将时间同步更改为北京时间) xiaolei@hadoop1:~$ date Wed Oct 26 02:42:08 PDT 2017 xiaolei@hadoop1:~$ sudo tzselect 根据提示选择Asia China Beijing Time yes 最后将Asia/Shanghai shell scripts 复制到/etc/localtime xiaolei@h...原创 2017-09-01 13:20:04 · 719 阅读 · 0 评论