Elasticsearch
文章平均质量分 87
守猫de人
这个作者很懒,什么都没留下…
展开
-
hive 写 es 报EsHadoopRemoteException: index_closed_exception: closed null
错误由来,es添加xpack后,hive写es总报 index关闭。通过测试,其实数据是可以写入index,且数据量对不上,怀疑是最后提交的时候无法成功,一直提交刷新,最后报错。Status: FailedVertex failed, vertexName=Map 1, vertexId=vertex_1605086559607_0014_1_00, diagnostics=[Task failed, taskId=task_1605086559607_0014_1_00_000035, diagn原创 2020-11-16 11:04:09 · 794 阅读 · 0 评论 -
Cannot detect ES version - typically this happens if the network/Elasticsearch cluster is not acces
hive 给es写数据,建表的时候报下面的错误FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org.elasticsearch.hadoop.EsHadoopIllegalArgumentException: Cannot detect ES version - typically this happens if the network/Elasticsearch cluster i原创 2020-06-17 14:46:23 · 5828 阅读 · 2 评论 -
elasticsearch 之Aggregation聚合
我想做一个按某列字段进行分组统计个数,上网查询推介用Facet,但是在导包的时候,死活找不到,查询资料可知。在es的1.0版本有Facet这个,2.0只有的版本换成了aggregation。所用我们现在用aggregation现实这个功能。原创 2017-07-06 10:29:24 · 474 阅读 · 0 评论 -
通过maven-shade-plugin 解决Elasticsearch与spark的jar包冲突问题
最近由于公司的spark版本升级使用spark2.1.1版本,个人感觉spark2.1.1确实好用些。我写的代码上需要连接elasticsearch,去es查询然后返回结果,这个时候在使用maven打包然后运行就会报下面的错之前在使用spark1.6的就没有出现过这个情况。查看错误发现是无法创建ES的客户端,上网查看质料原因是guava18个和包和spark自带的冲突了。然原创 2017-08-16 09:58:47 · 1408 阅读 · 0 评论