zhangxiping

说在前面的话：最近一年做了很多大数据相关的业务，发现ES的应用场景非常多，即可作为查询服务，配合一些可视化组件，例如grafana也可作为监控数据存储服务，查询性能能到毫秒级的，但一直停留在使用的层面，所以有必要系统的学习底层并记录一下。...

背景为了满足公司的安全合规要求，我们需要采集系统的服务的系统日志，nignx日志，能够提供给政府安全部门查询。这里选择（ELK）Elasticsearch、Logstash、Kibana 作为落地实现工具。日志样例接口调用日志包括两部分：ys-web服务日志位置：/usr/local/hikvision/tomcat6/logs/shipin7-api.log日志格式：2018-08-16 12:29:13,438 INFO API - execution(UserController.l

背景今天遇到一个问题，在运行sparkStreaming任务写ES，出现如下错误：20/04/27 09:45:12 ERROR spark.TaskContextImpl: Error in TaskCompletionListenerorg.elasticsearch.hadoop.EsHadoopException: Could not write all entries for bu...

链接: Elasticsearch的索引模板.

...