Hortonworks
浮生物语QAQ
这个作者很懒,什么都没留下…
展开
-
http服务停止导致Ambari添加服务失败
最近尝试使用ambari安装HDP集群,跌跌撞撞的终于安装成功了,在使用过程中也遇到了一些问题,这里记录之。尝试添加kafka服务,原本以为很简单的东西,事实证明报错了。果断查看日志。开始也并没有看出什么头绪,然后又尝试添加其他服务例如sqoop,mahout等,意外的是居然都失败了,看来并不是服务本身配置的问题了。再回过头仔细看日志,其中一句话。 “Cannot原创 2018-01-16 14:09:01 · 1232 阅读 · 0 评论 -
HDP 集群中flume与kafka的整合
首先保证flume与kafka正确安装并启动,这个比较简单,直接在ambari中添加新服务即可,不多赘述。配置flume新建一配置文件kafka.conf, 编辑,追加一下内容。 #扫描指定文件配置 agent.sources = s1 agent.channels = c1 agent.sinks = k1 agent.sources.s1.type=原创 2018-01-17 10:16:39 · 1779 阅读 · 0 评论 -
Ambari系统概述
前言Hadoop集群的管控一直是一个热门的话题,对于这样的一个应用场景,我所知道国内很早就有人研究并且取得不错的成绩,这就是EasyHadoop。它的功能主要有集群安装,管理,监控等功能,有兴趣的朋友可以百度,这位作者的博客有很详细的介绍。今天,我所要重点介绍的Apache的顶级项目,现在是大数据新贵Hortonworks公司在推进的项目Ambari,这款软件具有集群自动化安装、中心化管理、集转载 2018-01-09 16:49:53 · 616 阅读 · 0 评论 -
Ambari + HDP集群的卸载
有的情况下,若需要换掉集群,重新安装新集群(不是卸载服务),就需要卸载ambari集群。清理残留文件是一个不小的麻烦,若清理不干净,重新安装集群的话,绝逼会让你头疼的。由于需要删除的东西太多,我就不一一写出来,用XXX代替名称,主要是每个人用的版本不一致,安装的HDP服务也不一致,所以名称也不一致,需要自己将相应命令代替到自己的集群中。1. 停止服务 ambari-server s...原创 2018-02-09 11:40:39 · 3949 阅读 · 1 评论