HUE与YARN的集成

HUE与YARN的集成

配置hue.ini
找到[[yarn_clusters]]标签，涉及修改配置如下：

[[yarn_clusters]]
[[[default]]]
#yarn服务的配置
      resourcemanager_host=192.168.56.86
      resourcemanager_port=8032
      #是否将作业提交到此群集，并监控作业执行情况
      submit_to=True
      #logical_name=cluster-yarn1(如果开高可用的话)
      #配置yarn资源管理的访问入口
      resourcemanager_api_url=http://192.168.56.86:8088
      proxy_api_url=http://192.168.56.86:8088
      #历史服务器管理的入口，查看作业的历史运行情况
      history_server_api_url=http://192.168.56.87:19888

Hadoop启动jobhistoryserver来实现web查看作业的历史运行情况：./mr-jobhistory-daemon.sh start historyserver

3.2.2、重启HUE测试

$ build/env/bin/supervisor
//测试
./bin/yarn jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.1.jar wordcount /input/ /output