Ambari安装指南

一、准备工作

l 基本工具

1) 安装epel,epel是一个提供高质量软件包的项目。先检查主机上是否安装:

rpm -q epel-release

2) 如果没有安装,使用rpm命令安装:

rpm -ivh http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.noarch.rpm

   (也可手动下载安装包安装)

3) 成功后查看其所依附的软件包:

rpm -qR epel-release

4) 导入key:

rpm --import /etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-6

5) 安装yum-priority:

yum install yum-priorities

6) 在主机仓库目录中可以查到epel.repo,命令:

① 

cd /etc/yum.repos.d

② 

ls | grep epel

7) 安装pdsh:

yum install pdsh

l 配置/etc/hosts和/etc/sysconfig/network

以Ambari节点下修改hosts文件为例说明:(本机192.168.1.162/hadoop03)

wps9E61.tmp

wps9E72.tmp

l 设置ssh免密码登录

略…

l 关闭SELinux、防火墙、packagekit

1) 关闭SELinux

① 暂时关闭:

setenforce 0

② 永久关闭:

vi /etc/selinux/config
,将其中的SELinux设置:SELINUX=disabled

2) 关闭防火墙 :

chkconfig iptables off

3) 关闭packagekit:

vi /etc/yum/pluginconf.d/refresh-packagekit.conf
,将enabled设为0

二、安装

l 下载Ambari仓库

1) 进入yum.repos.d仓库目录:

cd /etc/yum.repos.d

2) 下载Ambari仓库的资源清单文件:

wget http://public-repo-1.hortonworks.com/ambari/centos6/1.x/updates/1.6.1/ambari.repo

wps9E74.tmp

l 安装epel repository

1) 安装epel:

yum install epel-release

2) 查看是否配置成功,命令:

yum repolist
,若成功,则应显示如下:

wps9E84.tmp

l 用yum安装Ambari,同时也会安装PostgreSQL.

安装命令:

yum install ambari-server

l 配置ambari-server

执行命令:

ambari-server setup
,如果还没有关闭SELinux,执行这个命令的过程中会提示,选择y。然后会配置PostgreSQL,选择y自动下载安装jdk。之后配置数据库,选n使用默认数据库用户名ambari-server和密码bigdata,选y自己创建用户名密码。

三、启动

l 启动Ambari

1) 执行命令:

ambari-server start
启动服务,出现如下页面表示启动成功:

wps9E85.tmp

注意:如果是用普通用户例如hadoop安装ambari,并且数据库是mysql,启动时会报错,解决方案:

① 在mysql中建立用户

grant all privileges on *.* to 'admin'@'hadoop05' identified by ‘admin’
;

    创建ambari数据库。

② 用admin用户登录mysql,

use ambari
;然后
source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql
,

    导入ambari的sql脚本。

2) 在浏览器中输入“主机IP:8080”进入登陆界面,默认用户名密码为admin/admin。

wps9E86.tmp

这里要注意,前提是必须安装好httpd,并且启动httpd服务:

① 查看是否安装:

rpm -qa | grep httpd
,如果没有,安装命令:
yum install httpd

② 修改配置文件:

vi /etc/httpd/conf/httpd.conf
,如下:

wps9E87.tmp

wps9E98.tmp

③ 重启主机:

shutdown -r now
,等启动完成后,启动httpd服务:
servie httpd start

3) Ambari的相关配置命令

① 修改端口号:

vi /etc/ambari-server/conf/ambari.properties
,在文件中增加client.api.port=<port_number>,本机port_number修改为8888。

② 查看Ambari进程:

ps -ef | grep ambari

③ 停止Ambari进程:

ambari-server stop

④ 重启Ambari进程:

ambari-server restart

四、磁盘扩容

问题引入:后续进行MR Job执行时,会报类似“磁盘空间不够”的错误,原因是Ambari安装所在目录的磁盘容量不够导致。

解决方案:由于Ambari安装后,会创建一个LVM的逻辑卷,供Hadoop运行产生的临时文件存储用,如下:

wps9ED7.tmp

所以,我们只需要对vg_hadoop01进行扩容。操作如下:

1) 1表示第一块分区的信息,该分区已经被Hadoop占满;2表示第二块分区的信息,也就是我们需要将它扩容到vg_hadoop01上的分区。如下:

wps9EE8.tmp

2) 现将/dev/sdb5分区块(注意这里Id必须是8e,System必须是Linux LVM)分配给vg_hadoop01.

① 8e和Linux LVM的设置命令:

fdisk /dev/sdb
,接着按m,根据提示设置。

wps9EE9.tmp

② 输入命令:partprobe,让分区表生效。

wps9EEA.tmp

③ 由于LVM所在的文件类型是ext4,所以新的分区必须格式化为ext4.

wps9EFB.tmp

格式化命令:

mkfs –t ext4 /dev/sdb5
.

④ 创建PV(物理卷),命令:

pvcreate /dev/sdb5
,利用:pvdisplay查看:

wps9EFC.tmp

⑤ 扩容LVM,命令:

vgextend vg_hadoop01 /dev/sdb5
,利用:vgdisplay查看:

wps9EFD.tmp

⑥ 将LVM中的容量扩展到LV(逻辑卷),命令:

lvextend –L 100G /dev/vg_hadoop01/lv_root
,将分区/dev/vg_hadoop01/lv_root的容量扩充到100G.利用lvdisplay查看:

wps9F0D.tmp

3) 执行该重设大小,对于当前正在使用的/dev/vg_hadoop01/lv_root有效.命令:

resize2fs /dev/vg_hadoop01/lv_root
,查看扩容后的挂载情况:df -lhT.

wps9F0E.tmp

原文地址:http://www.cnblogs.com/ivan0626/

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
您好!要安装Hadoop,您可以使用Ambari来简化和管理整个过程。以下是基本的步骤: 1. 准备环境:确保您的服务器满足Hadoop的最低要求,并已正确配置网络和主机名解析。 2. 下载和安装Ambari:从Ambari官方网站下载适用于您操作系统的Ambari软件包,并按照官方文档的说明进行安装。 3. 启动Ambari Server:运行Ambari Server启动命令,如:`ambari-server start`。这将启动Ambari Server并开始运行Web界面。 4. 访问Ambari Web界面:使用您的Web浏览器,访问Ambari Server的URL,通常是`http://<ambari-server>:8080`。您将看到Ambari的登录页面。 5. 登录Ambari:使用默认的管理员用户名和密码(通常是admin/admin),登录到Ambari Web界面。 6. 创建集群:在Ambari Web界面中,选择“创建集群”选项,然后按照向导逐步完成集群创建过程。您需要提供有关您的集群的一些信息,如主机名、操作系统、Hadoop组件等。 7. 安装Hadoop组件:在集群创建过程中,您可以选择要安装的Hadoop组件,如HDFS、YARN、MapReduce等。根据您的需求选择适当的组件,并按照向导完成安装过程。 8. 配置Hadoop集群:一旦安装完成,您可以使用Ambari Web界面来配置和管理您的Hadoop集群。您可以设置各种属性、添加节点、监控集群状态等。 这只是一个大致的步骤指引,您可以参考Ambari官方文档以获取更详细的指导和说明。祝您成功安装Hadoop!如有更多问题,请随时提问。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值