Hue是一个友好的界面集成框架,可以集成各种大量的大数据体系软件框架,通过一个界面就可以做到查看以及执行所有的框架。接下来介绍如何使用hue来和hdfs,yarn,hive以及hbase进行集成。
Hue和Hdfs的集成
查看hadoop的core-site.xml将其的fs.defaultFS复制到hue.ini的对应位置
配置hdfs的web
再配置hadoop的相关路径
再在三台虚拟机的core-site.xml上添加配置文件配置
打开hue,查看文件可以看到hdfs上的数据
进入hdfs上的hive文件夹查看所有的hive表
查看hdfs中emp的数据
Hue和Yarn的集成
修改资源管理器的主机为hadoop001,端口为8032,还有一些默认的网址
Hue和Hive的集成
在hue.ini文件中加入hive_server的主机,端口号以及hive的conf文件夹的位置
配置完毕以后重新启动hdfs和yarn 再启动hue最后启动hive服务再进入hue界面中查看,可以看到hive的数据库的一些信息
查看hive的weblogs2的数据表如下:
可能会出现问题,database is locked,因为hue默认使用sqlite作为元数据库,所以要将其改为使用mysql作为元数据库,在mysql里面创建database hue
再进行初始化
查看初始化MySQL hue的数据表
初始化完成以后重新打开hue的webui,就不会出现database is locked的情况了
Hue和Hbase集成
在三台虚拟机的hbase下的hbase-site.xml配置文件中的添加如下内容,并且开启hbase thrift服务。
使用hbase-daemon.sh start thrift开启thrift服务,再查看虚拟机的jps,服务已经启动
、
查看hue的hbase服务,hue中的hbase中的表如下:
查看weblogs表的内容如下: