很多时候,你缺少的不是知识而是热情

MYSQL,NOSQL,架构,大数据

用logstash发邮件告警

logstash input http该输入插件会让logstash在一个端口上监听http请求,用户可以通过http请求发送告警请求。input { http { host => "0.0.0.0" port => 9500...

2015-11-13 13:39:23

阅读数:5796

评论数:0

Elasticsearch Query String Query

Query String Queryedit On this page Query string syntax Elasticsearch Reference:  master2.x 2.12.0 (current) 1.71.6 ...

2015-11-12 17:06:21

阅读数:3855

评论数:1

Elasticsearch _all字段

_all字段_all字段是把所有其它字段中的值,以空格为分隔符组成一个大字符串,然后被分析和索引,但是不存储,也就是说它能被查询,但不能被取回显示。_all能让你在不知道要查找的内容是属于哪个具体字段的情况下进行搜索,例如:PUT my_index/user/1 { "first_...

2015-11-12 16:29:38

阅读数:7320

评论数:1

从logstash -> output -> elasticsearch动态模板说起

logstash索引映射"mappings": { "_default_": { "dynamic_templates": [ { "string_...

2015-11-12 13:22:08

阅读数:5334

评论数:0

ELK平台性能优化(不断完善中)

架构层面 在logstash shipper和index之间增加redis或kafaka代理缓存 Elasticsearch ES系统性能让JVM使用OS的max-open-files ulimit -n 1000000 es_parms="-Delasticsearch -Des....

2015-11-11 17:07:02

阅读数:9020

评论数:1

把Elasticsearch作为时间序列数据库使用

这篇文章算是对另一篇《Elasticsearch as a Time Series Data Store》的简单翻译吧,自己的理解吧。 首先_source被关闭了,这样原始的json文档不会被重复存储一遍。 其次_all也被关闭了。而且每个字段的store都是False,也就是不会单独被存储。 这...

2015-11-05 15:42:00

阅读数:3352

评论数:0

ElasticSearch关联查找

ElasticSearch是一个基于Lucene的开源搜索引擎,支持全文检索,提供restful接口。在ES中,提供了类似于MongoDB的面向文档存储服务,这种面向文档的存储非常灵活,但是文档与文档直接的关联却比较麻烦,MongoDB里面有DBref,ElasticSearch里面却没有这个,这...

2015-11-05 14:13:57

阅读数:2679

评论数:0

Elasticsearch 两个可以用于压缩数据尺寸的特性

Doc Values Doc Values 会压缩存储重复的内容。 给定这样一个简单的 mapping mappings = { 'testdata': { '_source': {'enabled': False}, '_all': {'enab...

2015-11-05 14:11:22

阅读数:2257

评论数:0

ELK:kibana使用的lucene查询语法

kibana在ELK阵营中用来查询展示数据 elasticsearch构建在Lucene之上,过滤器语法和Lucene相同 kibana4官方演示页面 全文搜索 在搜索栏输入login,会返回所有字段值中包含login的文档 使用双引号包起来作为一个短语搜索 &...

2015-11-05 14:07:47

阅读数:9122

评论数:0

Elasticsearch随笔 01

translog一致性 ES索引的一致性通过translog来保证,就是即使内存中的数据没有来的及写入磁盘,ES重启后也会从translog中恢复数据。 那么translog的一致性怎样保证呢?translog是日志文件,日志文件也有缓存,那么在translog在缓存时,OS挂了,怎么办? ...

2015-11-05 11:10:21

阅读数:600

评论数:0

logstash elasticsearch output插件的bulk提交

logstash的output设置为elasticsearch时,实际上logstash在向es中插入数据时也是bulk提交的。参数:flush_size 表示多少条flush一起提交到es.参数:idle_flush_time 表示距离上次flush的时间之后多少秒自动flush提交一次这两...

2015-11-02 17:20:35

阅读数:3919

评论数:1

提示
确定要删除当前文章?
取消 删除
关闭
关闭