Elasticsearch
Meyaoo
这个作者很懒,什么都没留下…
展开
-
通过Flume拉取Kafka数据保存到ES
通过Flume拉取Kafka数据保存到ES原创 2017-06-08 13:52:31 · 4876 阅读 · 1 评论 -
使用ES-Hadoop插件通过Hive查询ES中的数据
本来是想既然可以通过es-hadoop插件用hive查询es的数据,为啥不能用impala来做分析呢; 结果是hive查es成功了,impala查询不了,悲剧,但还是记录一下过程中遇到的问题,特别是日期格式转换那里搞了好久。安装: 下载地址:https://www.elastic.co/cn/downloads/hadoop 找对应或高于自己es的版本即可 下载下来其实是一堆jar包...原创 2018-04-20 16:49:08 · 3722 阅读 · 3 评论 -
ES分页问题及使用Scroll-Scans接口导出数据到csv
最近在对ES中大量数据做分页展示并导出一、offset大于一万的时候报错了。。。原来有一个参数:index.max_result_window控制估量一下数据量大小改大即可,此值是integer类型,不能无限大,而且但过大会影响ES查询效率:步骤: 首先关闭索引: 红线处改成索引名提交即可: { “max_result_window” : “100000000”}PU...原创 2018-04-20 17:26:24 · 1251 阅读 · 0 评论