多线程同步写ES切分文件在这篇文章中使用代码切割文件，这里尝试使用split命令切分文件。split -l 250000 all_rate.csv 25万行为分界线分割文件import org.elasticsearch.action.bulk.BulkRequestBuilder;import org.elasticsearch.client.transport.Tra...
【此文几天前曾删除过一次，因为并没有真正意义上的的解决如标题所示的问题】
接上一篇文章elasticsearch数据到hive、es-hadoop6.3.0中最后hive的查询任务，某些map长时间执行。
1、查看19888端口历史任务：
2、8088
24个map长时间执行，96个完成。
24个未完成的map分别在ip11、12、13节点，分别是9、9、6个map
查看这些失败的任务，发现不存在失败map集中在某一datanode节点的情况
yarn？不，集群yarn状态ok。
yarn资源的分配？看看log，好吧，我也看不出什么名堂
留意到这样的日志，但不知意义（
2万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
最低0.47元/天 解锁文章
