【一键Hadoop】 开源项目EasyHadoop

EasyHadoop是一个源自暴风影音数据平台的开源Hadoop一键安装系统,支持Hadoop稳定版本和多种集成特性。它提供界面化的安装、部署和管理功能,适用于64位Linux操作系统,特别是Redhat和CentOS。使用EasyHadoop可以简化Hadoop集群的配置和监控,包括防火墙、SELinux的调整等。此外,文章还介绍了作者向磊关于Hadoop平民化的观点,强调了EasyHadoop在降低Hadoop技术门槛方面的贡献。
摘要由CSDN通过智能技术生成

类似【一键OpenStack】,介绍个好的快速部署Hadoop工具:

和phpHiveAdmin一样, EasyHadoop也是个为懒惰而生的项目。
简而言之,就是在一个网页上对Hadoop集群进行安装,重启,修改配置文件,查看log等功能。
后续还会加入hive,hbase,pig之类的。

当然, Cloudera Manager 是个不错的选择,不过一旦集群数量超过50,当然仍然可以使用hadoop,但是那个好用的界面会提示你购买许可协议。 所以,基于这一点,为了打破商业公司的垄断,为开源做一点微薄的贡献。更是为自己部署集群的时候可以更快捷方便,业余时间在家花了3周左右时间开发了这么一个东西。软件本身完全开源,遵循GPLv3协议。

EasyHadoop 是一个Hadoop一键安装系统,方便大家更容易安装部署Hadoop软件。

EasyHadoop 源自暴风影音Hadoop数据平台项目而来,由前暴风影音数据团队修湘调研,向磊编写。

本着从来源中来,到开源中去,并回馈开源社区的回馈思想。

开放此管理部署系统方便大家安装使用,以此和行业共同学习进步。

支持特性如下:

1.Haoop 稳定版本 hadoop-1.1.1-1

2.集成 JDK 6

3.集成LZO,hadoop-gpl-packaging-0.5.4-1

4.界面化一键安装部署管理hadoop集群。

5.支持64位 linux 操作系统. 特别是 redhat centos 5 6

6.五种秒级监控图表,实时查看节点服务器内存,硬盘,CPU,MR状态,负载状态,及时发现问题。

7.支持配置推送,hosts文件推送,自动生成机架感知脚本

使用方法:

http://github.com/xianglei/easyhadoop

点zip图标下载,然后运行EasyHadoopCentral中的install_centos(x).sh进行安装



项目托管在 github 上面。


------------------------------------------------------------------------------EH Agent-----------------------------------------------------------------------------------------

注意事项:

1. 务必关闭防火墙,否则连不上!

首先切换至root :  sudo -s

/etc/rc.d/init.d/iptables stop  
查看iptables状态:service iptables status


iptables开机自动启动:
开启: chkconfig iptables on 
关闭: chkconfig iptables off
iptables关闭服务:
开启: service iptables start 
关闭:sudo  service iptables stop

2.  

 
 
 
将EasyHadoopAgent中的python脚本分别上传至每台待安装的
节点服务器的任意路径下,并依次执行下列命令:
------------
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值