![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 85
留点心意的博客
这个作者很懒,什么都没留下…
展开
-
统计系统部署
一、 服务器准备1. 192.168.1.232. 192.168.1.2303. 192.168.1.2484. 192.168.1.2465. 192.168.1.232二、 应用程序准备1. Zookeeper3.4.6 负责管理namenode和master的ha(高可靠)切换2. Hadoop2.4.1 负责存储日志3. Spark1.3.1 负责统计原创 2017-08-18 12:12:53 · 271 阅读 · 0 评论 -
hadoop+spark+zookeeper
主机名IP地址安装的软件运行的进程Node10192.168.18.23jdk,hadoop,sparknamenode,resourcemanager,zkfcNode20192.168.18.230jdk,hadoop,sparknamenode,原创 2017-08-17 10:51:29 · 583 阅读 · 0 评论 -
Hadoop报错
报错一指定hadoop临时目录-->hadoop.tmp.dir/usr/local/software/hadoop/tmp备注:如没有配置hadoop.tmp.dir参数,此时系统默认的临时目录为:/tmp/hadoo-hadoop。而这个目录在每次重启后都会被干掉,必须重新执行format才行,否则会出错。原创 2017-08-21 15:18:10 · 405 阅读 · 0 评论