如果在执行DUMP X表
里处理数据时间过久的话,注意回看执行代码下的输出语句,如果出现以下语句,极有可能是未开启JobHistory进程而出现的异常报错
参考:https://www.jianshu.com/p/0f3b5231a19c
注:
- 修改文件是只在主节点端下修改。
- 原参考里是改
/hadoop的安装文件夹/etc/hadoop/map-site.xml
的,而在我的主节点下hadoop文件夹下没有map-site.xml的,但有mapred-site.xml。有map-site.xml的就改map-site.xml,没有map-site.xml但有mapred-site.xml就改mapred-site.xml,改mapred-site.xml的内容和改map-site.xml是一样的。 - 启动JobHistory(
mr-jobhistory-daemon.sh start historyserver
)前先已启动hadoop进程(start-all.sh
),不然会多了个未知进程的。