lyzkks的博客

导入测试数据这里使用官方的测试数据进行导入，教程在 测试数据教程导入模板PUT /logstash-2015.05.18{ "mappings": { "log": { "properties": { "geo": { "properties": { "coordinates": {

saltstack自定义模块saltstack模块是指被salt调用的python函数。默认路径在/srv/salt/_modules。调用方法是：salt "*" 文件名.函数名支持python和Cython，python以.py结尾，Cython以.pyx结尾。同步到minion的方法： 1、salt "*" state.apply 2、salt "...

saltstack基本使用按照saltstack部署的方式不是一个master+minion的测试环境。通过salt-key -L查看一下加入salt环境的minion： Grains模块grains模块使用grains是minion启动的时候采集的系统的静态信息，包括cpu、操作系统、文件系统、硬盘等。显示所有的minion的grians信息：salt '*...

saltstack介绍概念1、一个配置管理系统，能够维护预定义状态的远程节点。 2、一个分布式的远程执行系统，用来在远程节点上执行命令和查询数据。特点1、相对于其他（例如pupet）重量型自动化运维工具来讲其相对简单。 2、并发能力和并行执行能力强于ansible。 3、基于成熟的技术。 4、有python api，可自定义功能。 5、灵活，开源。服务架构...

kibana线上部署推荐架构kibana页面Index Patterns在kibana页面中，Index Patterns 是用来定义索引匹配的。 点击进入这个功能的页面后，大体分为2个部分，左侧是创建按钮和已创建索引的部分，右边是具体某一索引的详情。 右侧有三个部分，第一部分是fields字段，第二段是scripts fields脚本字段，第三段source ...

apilogstash 提供了丰富的api来查看logstash的状态。 x-packlogstash的x-pack插件也提供了logstash相关的监控功能，将在kibana中以图形方式展现，弥补了api不直观的功能。安装使用如下命令：logstash-plugin install x-pack 安装完成后修改logstash配置文件：# 在最后的 ...

input插件input 插件指定数据的输入源，一个pipeline可以有多个input插件。stdin举例： file配置 glob匹配语法举例 kafkakafka是最流行的消息队列。 codec 插件codec插件作用域input和output插件，负责将数据在原始与logstash ev...

介绍简介logstash 是一个数据收集处理引擎。 工作流程分为三个阶段 处理流 pipelinepipeline 是input-filter-output的三个阶段的处理流程，包含队列管理、插件生命周期管理。logstash event原始数据进入logstash后在内部流转并不是以原始数据的形式流转，在input处被转换为event，在outp...

分布式特性es本身支持集群模式，是一个分布式系统，主要有两个好处：增大系统容量，如内存、磁盘，使es集群可以支持PB的数据提高系统的可用性，即使部分节点停止服务也不影响整个集群es集群由多个es实例构成：不同的集群通过名字来区分，可通过cluster.name进行修改，默认为elasticsearch；每个es实例本质上是一个JVM进程，且有自己的名字，可通过node...

docker compose用法什么是composeCompose是一个定义和管理多容器的工具，使用Python语言编写。使用Compose配置文件描述多个容器应用的架构，比如使用什么镜像、数据卷、网络、映射端口等；然后一条命令管理所有服务，比如启动、停止、重启等。安装compose一键部署LNMP网站平台一键部署nginx反向代理Tomcat集群...

组件介绍cAdvisorGoogle开源的用于监控基础设施应用的工具，它是一个强大的监控工具，不需要任何配置就可以通过运行在Docker主机上的容器来监控Docker容器，而且可以监控Docker主机。更多详细操作和配置选项可以查看Github上的cAdvisor项目文档。InfluxDB它是一个分布式时间序列数据库。cAdvisor仅仅显示实时信息，但是不存储监视数据。因此，...

简介Portainer是一个开源、轻量级Docker管理用户界面，基于Docker API，可管理Docker主机或Swarm集群，支持最新版Docker和Swarm模式。Portainer 允许您管理 Docker 容器、image、volume、network 等。 它与独立的 Docker 引擎和 Docker Swarm 兼容。官方网址是：https://portainer...

搭建私有镜像仓库当使用docker pull下载一个镜像的时候，实际是从docker hub网站下载镜像。Docker Hub作为Docker默认官方公共镜像；如果想自己搭建私有镜像仓库，官方也提供registry镜像，使得搭建私有仓库非常简单。下载registry镜像并启动docker pull registrydocker run -d -v /opt/registry:/...

网络模式bridge默认网络，Docker启动后默认创建一个docker0网桥，默认创建的容器也是添加到这个网桥中。 host容器不会获得一个独立的network namespace，而是与宿主机共用一个。 在容器中使用ifconfig查看网络发现显示的是宿主机的网络none获取独立的network namespace，但不为容器进行任何网络配置，之后用...

创建Mysql数据库容器创建自定义网络创建自定义网络的目的是方便做服务的发现。docker network create lnmp创建容器docker run -tid --name=lnmp-mysql --net lnmp -p 3306:3306 --mount src=mysql-vol,dst=/var/lib/mysql -e MYSQL_ROO...

将Docker主机数据挂载到容器方式volumes：Docker管理宿主机文件系统的一部分（/var/lib/docker/volumes）。bind mounts：可以存储在宿主机系统的任意位置。tmpfs：挂载存储在宿主机系统的内存中，而不会写入宿主机的文件系统。volume方式管理卷docker volume create nginx-voldo...

场景一：节省项目环境部署时间1.单项目打包每次部署项目到测试、生产等环境，都要部署一大堆依赖的软件、工具，而且部署期间出现问题几率很大，不经意就花费了很长时间。Docker主要理念就是环境打包部署，可在任意Docker Engine运行。前期我们只需要将每个项目环境打包到镜像，push到镜像仓库，当有需要部署这个项目时，直接pull镜像启动容器，这个项目就可以访问了！一次构建多次部署，...

架构和组件组件功能cAdvisor：容器数据收集。Heapster：集群监控数据收集，汇总所有节点监控数据。InfluxDB：时序数据库，存储监控数据。Grafana：可视化展示。架构图工作流程cAdvisor负责收集节点的状态信息，然后Heapster会通过kubelet向每一个节点请求cAdvisor收集的信息，并将信息存储在InfluxDB中，Gra...

架构原理Prometheus 介绍Prometheus （中文名：普罗米修斯）是由 SoundCloud 开发的开源监控报警系统和时序列数据库(TSDB)。自2012年起,许多公司及组织已经采用 Prometheus，并且该项目有着非常活跃的开发者和用户社区。现在已经成为一个独立的开源项目。Prometheus 在2016加入 CNCF ( Cloud Native Com...

在之前的实验中，kubernetes集群都是一台master和两台node组成的小集群，在实际的生产环境中需要考虑到集群的高可用。在node节点实际已经实现了高可用，pod分布在不同的节点上，当一个节点宕机的时候，其上的pod会漂移到正常的节点上。所以，重点的高可用重心就要放在master上。官方的master节点高可用架构图中可以看出，用户通过kubectl发送命令经过LB进...