2018年07月_lyzkks

原创 kibana篇之数据探索Discover

导入测试数据这里使用官方的测试数据进行导入，教程在测试数据教程导入模板PUT /logstash-2015.05.18{ "mappings": { "log": { "properties": { "geo": { "properties": { "coordinates": {

2018-07-29 12:30:06 2976

原创 saltstack API的使用

saltstack自定义模块saltstack模块是指被salt调用的python函数。默认路径在/srv/salt/_modules。调用方法是：salt "*" 文件名.函数名支持python和Cython，python以.py结尾，Cython以.pyx结尾。同步到minion的方法： 1、salt "*" state.apply 2、salt "...

2018-07-26 21:23:52 789

原创 saltstack使用

saltstack基本使用按照saltstack部署的方式不是一个master+minion的测试环境。通过salt-key -L查看一下加入salt环境的minion： Grains模块grains模块使用grains是minion启动的时候采集的系统的静态信息，包括cpu、操作系统、文件系统、硬盘等。显示所有的minion的grians信息：salt '*...

2018-07-22 18:39:20 871

原创 saltstack基础

saltstack介绍概念1、一个配置管理系统，能够维护预定义状态的远程节点。 2、一个分布式的远程执行系统，用来在远程节点上执行命令和查询数据。特点1、相对于其他（例如pupet）重量型自动化运维工具来讲其相对简单。 2、并发能力和并行执行能力强于ansible。 3、基于成熟的技术。 4、有python api，可自定义功能。 5、灵活，开源。服务架构...

2018-07-22 17:07:16 536

原创 kibana

kibana线上部署推荐架构kibana页面Index Patterns在kibana页面中，Index Patterns 是用来定义索引匹配的。点击进入这个功能的页面后，大体分为2个部分，左侧是创建按钮和已创建索引的部分，右边是具体某一索引的详情。右侧有三个部分，第一部分是fields字段，第二段是scripts fields脚本字段，第三段source ...

2018-07-22 15:27:27 729 1

原创 logstash篇之监控运维

apilogstash 提供了丰富的api来查看logstash的状态。 x-packlogstash的x-pack插件也提供了logstash相关的监控功能，将在kibana中以图形方式展现，弥补了api不直观的功能。安装使用如下命令：logstash-plugin install x-pack 安装完成后修改logstash配置文件：# 在最后的 ...

2018-07-22 13:40:48 7820

原创 logstash篇之插件

input插件input 插件指定数据的输入源，一个pipeline可以有多个input插件。stdin举例： file配置 glob匹配语法举例 kafkakafka是最流行的消息队列。 codec 插件codec插件作用域input和output插件，负责将数据在原始与logstash ev...

2018-07-15 13:05:35 8317

原创 logstash篇之入门与运行机制

介绍简介logstash 是一个数据收集处理引擎。工作流程分为三个阶段处理流 pipelinepipeline 是input-filter-output的三个阶段的处理流程，包含队列管理、插件生命周期管理。logstash event原始数据进入logstash后在内部流转并不是以原始数据的形式流转，在input处被转换为event，在outp...

2018-07-14 16:23:36 16883

lyzkks的博客