Jsxiao的博客

厚德载物

ELK5.2+kafka+zookeeper+filebeat集群部署

架构图 考虑到日志系统的可扩展性以及目前的资源(部分功能复用),整个ELK架构如下: 架构解读 : (整个架构从左到右,总共分为5层) 第一层、数据采集层 最左边的是业务服务器集群,上面安装了filebeat做日志采集,同时把采集的日志分别发送给两个logstash服务(17.16...

2017-07-12 10:38:50

阅读数 1578

评论数 0

Pycharm中pyenv和virtualenv使用详解

Pycharm中pyenv和pyvenv使用详解背景python多版本控制工具的差异1、概念理解 背景 由于有一次ELK的升级文档写了半天,却忘记保存,以为自动保存的,结果发现没有了,打击了积极心,很久不曾更新这个博客,但是最近开发一个项目,需要python的多环境,使用的技术pyenv和pyve...

2018-11-29 17:06:54

阅读数 780

评论数 0

Python Elasticsearch模块的使用

参考URL: https://es.xiaoleilu.com/054_Query_DSL/70_Important_clauses.html http://www.cnblogs.com/letong/p/4749234.html 背景 最近发现某类日志每天几十万,但是有几百条的丢失,为...

2018-08-21 16:08:04

阅读数 764

评论数 0

vbs获取本机信息以及ping的监控检测

脚本背景 有时候跟非技术人员沟通的时候,你让人家提供主机信息或者让别人ping什么域名检测健康情况先行判断的时候,一般的人员可能无法理解,这对于他们可能是灾难性的操作,所以这边提供了一个vbs脚本直接发给非技术人员,让别人双击之后截图即可 程序本体 Function GetIPMAC...

2018-08-14 16:39:39

阅读数 413

评论数 0

检测oracle数据库同步和备份

#! /usr/bin/env python # -*- coding: utf-8 -*- # auther : xiaojinsong(61627515@qq.com) import paramiko import logging, configparser import cx_Oracl...

2018-07-03 16:49:31

阅读数 413

评论数 0

python安装cx_Oracle插件

python安装cx_Oracle插件 一、操作系统 centos7.4 x86 64bit 二、所需软件 instantclient-sdk-linux.x64-11.2.0.4.0.zip instantclient-basic-linux.x64-11.2.0.4.0.zip...

2018-07-03 16:43:58

阅读数 124

评论数 0

jenkins部署jar包应用起不来的情况

jenkins部署jar包应用起不来的情况 今天在用jenkins部署jar包发布的时候,发现没有任何报错,但是应用死活起不来,google了半天依旧没有解决,并不是网上的设置BUILD_ID=dontKillMe的方法解决的,因为此类方法的各种姿势都试验了遍毫无作用。具体情况如下: 为了...

2018-06-16 18:01:40

阅读数 3661

评论数 3

zabbix的数据库优化

zabbix数据库优化 参考文档: https://www.zabbix.org/wiki/Docs/howto/mysql_partition https://www.kancloud.cn/devops-centos/centos-linux-devops/375488 my.cnf的...

2018-06-07 09:13:11

阅读数 1448

评论数 0

zabbix—agent的批量安装和更新

zabbix—agent的批量安装和更新 linux下批量安装和更新 这里关于agent的安装有两个工具思路: 配置中心管理思路,工具可以使用puppet或自主开发(由于公司业务繁多,但每个规模不大,这里未采用配置中心的方式) 批量处理管理思路,工具使用ansible+shell,采用的此...

2018-05-27 21:21:56

阅读数 2124

评论数 0

zabbix的server的安装

zabbix的server的安装 环境准备 操作系统:centos7.4 nginx版本:nginx/1.12.2 php版本:php-7.1.11 mysql版本:5.5.56-MariaDB 初始化操作系统 执行下面的交互脚本,输入主机名,ip,mask,gate #!/...

2018-05-25 11:53:59

阅读数 132

评论数 0

用来扫描一些网段的ip和端口的存活

用来扫描一些网段的ip和端口的存活 #!/usr/bin/env python # -*- coding:utf-8 -*- # __author__ = 'xiaojinsong' # __time__ = '2018/2/28' import sys from nmap import Po...

2018-03-05 13:30:44

阅读数 1122

评论数 0

python3.6 nmap模块的安装问题

python3.6 nmap模块的安装问题 Traceback (most recent call last): File “/apps/data/web/working/study/yunwei_tool/port_scan.py”, line 7, in from nmap...

2018-03-03 23:47:56

阅读数 1496

评论数 0

python2.6.6 sftp小程序

python2.6.6 sftp小程序 用sftp的模块来传输文件,代码如下: #!/usr/bin/env python # -*- coding:utf-8 -*- # __author__ = 'xiaojinsong' # __time__ = '2018/2/27' im...

2018-02-27 14:25:38

阅读数 165

评论数 0

nginx错误日志入库小程序

nginx错误日志入库小程序 为了独立记录nginx_error日志来自定义一些ip策略阻挡攻击,这里把所有nginx服务器的错误日志入库来进行统一处理,代码如下,然后结合supervisor来使用: #!/usr/bin/env python # -*- coding:utf-8 -*- #...

2018-02-27 14:20:01

阅读数 132

评论数 0

nginx、tomcat、php日志轮转程序

nginx、tomcat、php日志轮转程序 为了按分类自定义轮转的文件,所以写了如下代码: #!/usr/bin/env python # -*- coding:utf-8 -*- # __author__ = 'xiaojinsong' # __time__ = '2018/2/26'...

2018-02-27 14:13:26

阅读数 200

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭