HUE安装配置

亲测有效

1. HUE 编译安装

Hue官方网站
HUE官方用户手册
官方安装文档
HUE下载地址

Hue的安装并不是那么简单,官方并没有编译好的软件包,需要从github上下载源 码、安装依赖、编译安装。以下详细讲解Hue下载、编译、安装的操作过程。

安装Hue的节点上最好没有安装过MySQL,否则可能有版本冲突,这里选择将Hue 安装在erainm02 上。

大体步骤:

1、下载软件包、上传、解压(hue-release-4.3.0.zip、apache-maven-3.6.3- bin.tar.gz)
2、安装依赖包
3、安装maven
4、hue编译
5、修改hadoop配置
6、修改hue配置
7、启动hue服务

1.1 下载软件包

到官方网站下载 hue-release-4.3.0.zip;上传至服务器,并解压缩

yum install unzip
unzip hue-release-4.3.0.zip

1.2 安装依赖

# 需要Python支持(Python 2.7+ / Python 3.5+)
python --version

# 在 CentOS 系统中安装编译 Hue 需要的依赖库
yum install ant asciidoc cyrus-sasl-devel cyrus-sasl-gssapi cyrus-sasl-plain gcc gcc-c++ krb5-devel libffi-devel libxml2- devel libxslt-devel make mysql mysql-devel openldap-devel python-devel sqlite-devel gmp-devel

yum install -y rsync

备注:

以上依赖仅适用CentOS/RHEL 7.X,其他情况请参考HUE-DEPENDENCIES

安装Hue的节点上最好没有安装过MySQL,否则可能有版本冲突 安装过程中需要联网,网络不好会有各种奇怪的问题

1.3 安装Maven

编译 Hue 还需要 Maven 环境,因此在编译前需要安装 Maven。

下载 apache-maven-3.6.3-bin.tar.gz,上传虚拟机解压缩,添加环境变量

vi /etc/profile
# 添加环境变量
export MAVEN_HOME=/opt/servers/apache-maven-3.6.3
export PATH=$PATH:$MAVEN_HOME/bin

source /etc/profile
# 验证安装
mvn --version

1.4 编译

# 进入 hue 源码目录,进行编译。 使用 PREFIX 指定安装 Hue 的路径
cd /opt/software/hue-release-4.3.0
# 路径下执行安装
PREFIX=/opt/servers make install
cd /opt/servers
# 如果想把HUE从移动到另外一个地方,由于HUE使用了Python包的一些绝对路径,移 动之后则必须执行以下命令:
# 这里不要执行(不需要移动,以下就不要执行)
rm app.reg
rm -r build
make apps

备注:这一步持续的时间比较长,还会从网上下载 jar;需要联网

1.5 修改 Hadoop 配置文件

在 hdfs-site.xml 中增加配置

<!-- HUE -->
<property>
	<name>dfs.webhdfs.enabled</name>
  <value>true</value>
</property>
<property>
	<name>dfs.permissions.enabled</name>
	<value>false</value>
</property>

在 core-site.xml 中增加配置

<!-- HUE -->
<property>
	<name>hadoop.proxyuser.hue.hosts</name>
  <value>*</value>
</property>
<property>
  <name>hadoop.proxyuser.hue.groups</name>
  <value>*</value>
</property>
<property>
  <name>hadoop.proxyuser.hdfs.hosts</name>
  <value>*</value>
</property>
<property>
  <name>hadoop.proxyuser.hdfs.groups</name>
  <value>*</value>
</property>

增加 httpfs-site.xml 文件,加入配置

<configuration>
<!-- HUE -->
	<property>
    <name>httpfs.proxyuser.hue.hosts</name>
    <value>*</value>
  </property>
  <property>
    <name>httpfs.proxyuser.hue.groups</name>
    <value>*</value>
  </property>
</configuration>

备注:修改完HDFS相关配置后,需要把配置scp给集群中每台机器,重启hdfs服 务。

1.6 Hue配置

# 进入 Hue 安装目录
cd /opt/servers/hue
# 进入配置目录
cd desktop/conf
# 复制一份HUE的配置文件,并修改复制的配置文件
cp pseudo-distributed.ini.tmpl pseudo-distributed.ini
vi pseudo-distributed.ini
# [desktop]
  http_host=erainm02
  http_port=8000
  is_hue_4=true
  time_zone=Asia/Shanghai
  dev=true
  server_user=hue
  server_group=hue
  default_user=hue
# 211行左右。禁用solr,规避报错
app_blacklist=search

# [[database]]。Hue默认使用SQLite数据库记录相关元数据,替换为mysql
	engine=mysql
	host=erainm03
	port=3306
	user=hive
	password=12345678
	name=hue
	
	# 1003行左右,Hadoop配置文件的路径
	hadoop_conf_dir=/opt/servers/hadoop-2.9.2/etc/hadoop
## 到mysql中执行
# 在mysql中创建数据库hue,用来存放元数据
mysql -uhive -p12345678
mysql> create database hue;

# 初始化数据库(到hue目录下执行)
build/env/bin/hue syncdb build/env/bin/hue migrate

# 检查数据

1.7 启动 Hue 服务

# 增加 hue 用户和用户组
groupadd hue
useradd -g hue hue

# 在hue安装路径下执行
build/env/bin/supervisor

在浏览器中输入:erainm02:8000,可以看见以下画面,说明安装成功。 第一次访问的时候,需要设置超级管理员用户和密码。记住它(hue/123456)。
在这里插入图片描述

此时是可以登陆进去的,但是还是有问题,比如:hiveserver2没有配置等

2. Hue整合Hadoop、Hive

修改参数文件 /opt/servers/hue/desktop/conf/pseudo-distributed.ini

2.1 集成HDFS、YARN

# 211 行。 没有安装 Solr,禁用,否则一直报错
app_blacklist=search
# [hadoop] -- [[hdfs_clusters]] -- [[[default]]]
# 注意端口号。下面语句只要一个(看你的端口使用的是哪个,一般默认就是8020)
fs_defaultfs=hdfs://erainm01:8020
# fs_defaultfs=hdfs://erainm01:9000
webhdfs_url=http://erainm01:50070/webhdfs/v1
# 211 行左右
hadoop_conf_dir=/opt/servers/hadoop-2.9.2/etc/hadoop

# [hadoop] -- [[yarn_clusters]] -- [[[default]]]
resourcemanager_host=erainm03
resourcemanager_port=8032
submit_to=True
resourcemanager_api_url=http://erainm03:8088
proxy_api_url=http://erainm03:8088
history_server_api_url=http://erainm03:19888

2.2 集成Hive

集成Hive需要启动 Hiveserver2 服务,在l g03节点上启动 Hiveserver2

# [beeswax]
hive_server_host=erainm03
hive_server_port=10000
hive_conf_dir=/opt/servers/hive-2.3.7/conf

2.3 集成MySQL

# [librdbms] -- [[databases]] -- [[[mysql]]];1639行
# 注意:1639行原文: ##[[mysql]] => [[mysql]];两个##要去掉!
[[[mysql]]]
  nice_name="My SQL DB"
  name=hue
  engine=mysql
  host=erainm03
  port=3306
  user=hive
  password=12345678

备注:name是数据库名,即 database 的名称

control+z退出hue,然后重新启动

配置过程一定要注意,不然一不小心就会失败!!!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

erainm

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值