宇智波带土

 ElasticDump是一个ElasticSearch的数据导入导出开源工具包，方便使用。官方地址：官方地址：https://github.com/taskrabbit/elasticsearch-dump  安装方式如下：安装NodeJS下载源码:wget http://nodejs.org/dist/v0.10.32/node-v0.10.32-linux-x64.ta...

Kibana插件Timelion介绍  自定义分析图表 首先到Timelion定制页面：昨日与今日数据对比  定制完成后到kibana Visualize中找到刚才保存的面板      找到图表链接，内嵌到自定义页面中     最终页面效果就是这样的了。样式采用bootstrap默认。。 ...

Kibana插件Timelion介绍 Timelion是一个kibana时间序列展示组件效果图如下：The time series composer for KibanaKibana4.5安装方式： ./bin/kibana plugin -i elastic/timelion Kibana5安装方式./bin/kibana-plugin install ...

  当前Master节点A，数据节点B。  A日志： [2016-06-23 17:52:35,975][WARN ][transport.netty          ] [node-svr132] exception caught on transport layer [[id: 0xcb0c5acc, :38310 => /:9350]], closing...

ElasticSearch2.3.2 轮流重启升级流程 1.关闭分片迁移PUT /_cluster/settings {"transient":{"cluster.routing.allocation.enable":"none"}}2.可选操作 停止非必要的索引操作POST /_flush/synced 3.停止并升级单个节点如果使用zip安装，建议使用不同的c...

4.Logstash 入门教程-数据处理流程LS的处理流程分三个阶段：inputs->Filters-> Outputs.input：产生事件，filter：修改事件，output：输出事件。在Input，Output阶段支持codecs解编码器，这样就不用在数据输入和输出的位置配置独立的Filter了。 Input输入配置：常用的有Filesyslo...

ElasticSearch预警服务-Watcher详解-管理Watcher服务1.监听Watcher相关的数据存储在.watches索引中，该索引具有只读权限，必须通过API来创建，更新和删除。GET .watches/_search{ "fields" : [], "query" : {"match_all" : { } }} 2.通过Ki...

来看个小例子：固定周期采集数据，并设置数据预警机制采集数据配置，拉取RSS数据并存储到ElasticSearch中.1.下载并安装最新的logstash1.5版本地址：https://www.elastic.co/products/logstash 2.安装rss插件cd logstash-1.5.0bin/plugin install logstash-input-rss...

8.ElasticSearch预警服务-Watcher详解-监控Marvel数据如果ElasticSearch集群部署了Marvel相关的服务，那么就可以安装Watcher来监控异常情况的产生并发送预警。例如可以在以下情况下配置Watch Action动作.1.集群监控状态监控2.高内存使用率3.高CPU使用率4.高文件目录空间5.高FieldData 缓存使用6.节点加入或者脱离集群使用Wat...

ElasticSearch预警服务-Watcher详解-Action设置Watcher中的Action指配置指定的预警动作，在满足触发条件且不节流的情况下执行。每个Action动作执行一次,Action之间相互独立。执行过程中，发生任何错误都会记录结果，可以在历史记录中查看。Action可以访问Context中的内容。Watcher支持的Action类型有四种：EMail(邮件),Webhook...

ElasticSearch预警服务-Watcher详解-Transform设置Transform(数据转换)，在Watcher服务的Action执行前执行。可以执行Transform的位置有两次，分别是：1.全局定义(Watch Level)，将对所有的Watch动作生效2.局部定义(Action Level)，只对指定的Watch动作生效设置案例：{ "trigger" : { .....

ElasticSearch预警服务-Watcher详解-Condition设置Condition用于在Watcher触发后决定是否去执行Action动作.目前支持的类型有4种，分别是always,never,script,compare.如果没有进行设置，则默认为always类型。当Condition执行时，可以访问Context中的数据，即Script和Compare可以使用其中的数据来决...

Watcher的Input设置用于加载数据到执行Context中，目前支持三种模式设置，分别为simple,search,http。1.Simple简单输入    可以设定一些静态数据，供Watcher后续阶段进行计算，存储等。    这里可以定义静态数据作为一个字符串（STR），数值（NUM），或一个对象（Object） { "input" : { "simple"...

    Watcher服务详解-定时器的设定            关于Schedule配置选择，Watcher提供了丰富的时间语法支持，采用UTC时间，来我们一起看下如何设置:        支持的设置方式：    hourly:按小时周期设置    daily:按天周期设置    weekly:按周周期设置    monthly:按月周期设置    yearly:按年周期设置    cron...

Watcher的核心组成部分：1.Trigger:决定何时触发,必须对每个Watcher指定2.Input:将数据加载到Context中3.Condition:根据条件决定师傅执行Action操作,如不设置，默认总是执行4.Transform：可选传输设置：处理及数据Load过程设置5.Actions：动作：零个或者多个执行动作设定完整的案例：PUT _watcher/watch/log_...

本文将介绍如何安装Watcher服务，并介绍相关的功能特征。1.Watcher服务的安装    目前Watcher服务处于Beta阶段，使用者可以申请最新的beta-key，然后通过插件的方式进行安装bin/plugin -i elasticsearch/watcher/<watcher-beta-key> 2.验证服务  curl -XGET 'ht...

ElasticSearch警报和通知产品 Watcher(守望者)即将发布：(官方地址：https://www.elastic.co/products/watcher) Watcher：Watcher是即将发布的警报和通知产品，基于Elasticsearch的数据预警衍生产品。简单地定义一个条件，一个时间计划，触发指定条件后Watcher会执行相关的警报和通知。 几大功能...

强制重置脚本，请留意，可能会造成数据丢失。 NODE="YOUR NODE NAME"IFS=$'\n'for line in $(curl -s 'localhost:9200/_cat/shards' | fgrep UNASSIGNED); do INDEX=$(echo $line | (awk '{print $1}')) SHARD=$(echo $lin...