- 博客(37)
- 收藏
- 关注
原创 kafka命令
启动 zookeeper serverbin/zookeeper-server-start.sh config/zookeeper.properties启动 kafka serverbin/kafka-server-start.sh config/server.properties创建topicbin/kafka-topics.sh --create -...
2018-02-28 17:08:00 405
原创 python实现对kafka中日志数据监控报告(钉钉)
# !/usr/bin/env python# coding:utf-8# 该脚本是作统计from datetime import datetime, timedeltaimport osfrom dingtalkchatbot.chatbot import DingtalkChatbotfrom kafka import KafkaConsumerimport re# 存放告...
2018-03-21 17:21:42 3334
原创 saltstack安装httpd并更新文件
介绍 有时我们需要安装软件同时同步配置文件,或者我们只需要更新配置文件。主配置文件# salt '*' state.sls xes.elk.testinclude: - xes.elk.httpd-install# 同步httpd的配置文件/etc/httpd/conf/httpd.conf: file.managed: - source: salt://xes/elk/f
2018-03-08 16:57:52 473
原创 saltstack安装
配置yum源yum install epel-release -y安装master和minionyum install salt-master salt-minion -yminion端只需安装salt-minion配置 服务端和客户端都要配置 mastervim /etc/salt/master#####master: xue1###### 需要添加host客户端可以配置自己的
2018-02-28 16:58:54 373
原创 hadoop-hdfs-fuse本地挂载hdfs-nginx发布
环境 centos6.9Hadoop单点安装hadoop-hdfs-fuse 修改yum源[cloudera-cdh5]# Packages for Cloudera's Distribution for Hadoop, Version 5, on RedHat or CentOS 6 x86_64name=Cloudera's Distribution for Hadoop, Ver
2018-02-26 20:53:24 1558
原创 ELK-filebeat+kafka日志收集
环境 centos6.9ELK5.6所有节点都是单点非集群 filebeat:10.99.2.16elk:10.99.2.17kafka:10.99.2.23官方文档软件下载 ELK5.6.7-rpm java1.8-rpmes安装yum安装java环境和es:yum install elasticsearch-5.6.7.rpm jre-8u161-linux-x
2018-02-06 17:38:27 1823
原创 ELK-kibana来源热点图
环境 - ELK5.6 - centos6.9官方文档 - geoipelasticsearch需要的插件 ./elasticsearch-plugin install ingest-geoip - 重启ES,插件生效 下载ip库wget http://geolite.maxmind.com/download/geoip/database/GeoLite2-...
2018-02-05 16:41:27 1857
原创 搭建本地yum仓库并同步其它yum源
搭建本地yum仓库并同步其它yum源创建本地yum仓库createrepo -v /var/www/html/base/Packagesyum repolist 查看yum仓库信息 选择设定的centos6作为本地仓库,base仓库为同步源reposync -r base -p /var/www/html/ 已经下载过的会跳过,执行下载的时候 -p为指定目录,不然它会自动在当前目录创建”
2018-01-21 23:03:05 4378
原创 python实现对其它主机的操作
vim test.py# !/usr/bin/env python# coding:utf-8############################### 该脚本可以查看指定的IP的主机名 ## 当然也可以查看主机状态 ## 修改相应命令就好 ################################ 该脚本主要用到了fabric这个工具,通
2017-10-03 13:26:20 1122
原创 docker简单操作
拉取镜像:(学生云主机非常慢!)docker pull centosdocker pull nginx查看已有的镜像:[root@wang ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZEdocker.io/cent
2017-08-29 16:10:46 357
原创 MHA配置
环境:rhel6.5 firewalld selinux disabled MHA manager:172.25.67.1 master:172.25.67.2 slave:172.25.67.3 slave:172.25.67.4mysql三个节点: 三个节点之间ssh连接都不用密码 启动MySQL:/etc/init.d/mysqld start编辑配置文件vim /etc/my.c
2017-08-17 15:13:03 429
原创 在云上配置docker的2048小游戏
在腾讯云上买了个云服务器(学生优惠),除了在windows想用linux测点命令和脚本感觉就没什么用了,搭建的VPN免流也跑不了。今天突然想了解下docker,就弄了个2048小游戏。(自己的linux系统需要联网)安装软件,用云的好处是不用到处找依赖包,简单方便,刚体会到# yum install docker开启docker:# systemctl start docker拉取镜像:
2017-08-11 11:31:04 1616
原创 MySQL5.7半同步复制
半同步复制原理: 半同步复制保证了数据库之间数据的一致性。 MySQL5.7以前:rpl_semi_sync_master_wait_point = AFTER_COMMITclient-->MySQL SQL Parse-->Storage Involve-->write binary log-->storage commit-->wait ACK-->client(OK)主库把每一个事务写
2017-08-05 20:48:29 2238
原创 MHA故障转移日志
该日志在MHA管理主机中,配置文件中你所定义的日志文件中。在认定master主库宕机之后:故障转移步骤Thu Jul 27 19:19:56 2017 - [info] * Phase 1: Configuration Check Phase..Thu Jul 27 19:19:56 2017 - [info] Thu Jul 27 19:19:56 2017 - [info] GTID fai
2017-07-27 23:20:43 1015
原创 keepalived+lvs无法访问vip或访问超时
1. 在访问vip的时候,连接被拒绝,但是可以ping通:**[kiosk@foundation67 Desktop]$ curl -I 172.25.67.200curl: (7) Failed connect to 172.25.67.200:80; Connection refused2.访问VIP超时,但是可以ping通Connection timed out
2017-07-19 14:41:13 19350 12
原创 MySQL主从复制
实验环境: rhel6.5 mysql5.1 firewall selinux disabled master 172.25.67.1 slave1 172.25.67.2 slave2 172.25.67.3mysql 的 AB 复制 注: mysql 数据库的版本,两个数据库版本要相同,或者 slave 比 master 版本高!
2017-06-23 11:00:03 385
转载 MySQL复制原理
MySQL5.7的主从复制是将一台MySQL主机(master)的数据复制到其它MySQL主机(slave)中。复制过程中主服务器将更新写入二进制文件,并维护文件的一个索引以跟踪日志循环。这些日志记录发送到从服务器的所需要的更新,当一个从服务器连接主服务器时,它通知主服务器在服务器日志中读取的最后一次成功更新的位置,从服务器就接收上次更新位置之后的所有更新。 注意:所有从服务器的更新都应从主服务
2017-06-21 12:20:41 1319
原创 均衡负载LVS-DR模式
LVS/DR 利用大多数 Internet服务的非对称特点,负载调度器中只负责调度请求,而服务器直接将响应返回给客户,可以极大地提高整个集群系统的吞吐量。 调度器和服务器组都必须在物理上有一个网卡通过不分断的局域网相连,如通过交换机或者高速的HUB相连。 VIP地址为调度器和服务器组共享,调度器配置的 VIP地址是对外可见的,用于接收虚拟服务的请求报文;所有的服务器把VIP地址配置在各自的 No
2017-06-06 22:17:35 411
原创 虚拟机和真机间无法ping通的解决方法
虚拟机和真机间无法ping通的解决方法通过网桥连接保证在同一个网段内 brctl show brctl addif br0 vnet0 #添加虚拟网卡bridge name bridge id STP enabled interfacesbr0 8000.3417eb605d7a no p8p1
2017-05-27 22:34:22 1762
原创 linux笔记-DHCP服务
DHCP服务环境:redhat7.2DHCP服务简介:DHCP服务器自动为dhcp客户端分配IP地址和TCP/IP的配置信息。动态主机配置协议DHCP工作在应用层。它的守护进程是dhcpd。守护进程使用的端口号为UDP67端口。DHCP的优点:减少错误:把手工配置IP地址所导致的错误降低。例如,已经分配的IP再次分配给另一台设备所造成的冲突。减少网络管理
2017-04-26 14:05:08 745
原创 Python--爬取一个百度贴吧的图片(风景吧)
Python,爬取整个风景吧每一页的每个帖子里的图片#!/usr/bin/env python# coding:utf-8import reimport urllib__author__ = 'WL'x = 1 #图片数目urllist = []#获取每一页的地址def pageurl(): page = [] pagestr = 'http:/
2017-04-18 23:25:02 433
原创 linux笔记-iscsi
################ ISCSI ################iSCSI(Internet SCSI)支持从客户端(发起端)通过IP向远程服务器上的SCSI存储设备(目标)发送SCSI命令。iSCSI限定名称用于确定发起端和目标,并采用iqn.yyyy-mm.{reverse domain}:label的格式。默认情况下,网络通信是至iSCSI目标上的端口
2017-03-31 17:44:50 357
原创 linux笔记-samba
################ samba ################### 一、SAMBA:通用Internet文件系统(CIFS)也称为服务器信息块(SMB),是适用于Microsoft Windows服务器和客户端的标准文件和打印机共享系统。Samba服务的组成部分1. 软件包:Samba-common – Samba的支持文件Samb
2017-03-31 17:41:18 525
原创 linux笔记-高级网络配置
################高级网络配置################## 网桥网络桥接用网络桥实现共享上网主机和客户机除了利用软件外,还可以用系统自带的网络桥建立连接用双网卡的机器做主机网络桥接配置:vim /etc/sysconfig/network-scripts/ifcfg-enp0s25*********DEVICE=enp0s25O
2017-03-16 20:58:50 438
原创 linux笔记-SMTP
################### SMTP ###################Postfix由postfix RPM包提供,并通过postfix服务脚本控制。它是一个由多个协同操作程序构成的模块化程序,它的组件由master进程控制。Postfix的主配置文件是/etc/postfix/main.cf,可以使用文本编辑器或postconf命令进行编辑。post
2017-03-15 22:01:40 766
原创 linux笔记-mysql
################# mysql ##################### 安装软件,配置文件yum install mariadb-servernetstat -antple | grep mysqlvim /etc/my.cnf*********添加skip-networking=1*********mysql_secure_
2017-03-09 16:33:23 321
原创 linux笔记-磁盘管理
#################### 磁盘加密 ###################### 磁盘加密操作[root@desktop15 ~]# fdisk /dev/vdb ##创建分区/dev/vdb1[root@desktop15 ~]# partprobe ##加载分区表[root@desktop15 ~]# cryptsetup lu
2017-03-08 20:02:09 1350
原创 linux笔记-脚本练习
1、编写一个连接其它主机脚本,在网络畅通的情况下,只要有IP,用户和密码,就能连接。2、编写一个创建用户的脚本,分别有存放用户名和密码的两个文件,文件中一行对应一个密码或用户,该脚本能够创建用户文件中的用户,并给用户密码文件中对应的密码,同时要考虑,文件不存在、文件行数不一致以及用户已经存在的情况。
2017-03-08 18:12:26 495 1
原创 linux笔记-DNS
##################### DNS ######################yum install bind -y ##安装软件systemctl start named ##启动服务systemctl enable named ##开机启动firewall-cmd --permanent --add-service=d
2017-03-03 20:55:52 441
原创 linux笔记-系统修复
linux系统引导修复系统修复方法:1、通过光盘通过光盘修复:在虚拟系统管理器中点击“小灯泡”,选择" Boot Options",然后选择光盘启动至第一个。如果没有需要自己添加,选择添加硬件->Stirage->磁盘设备->CDROM设备->选择镜像文件(没有下载一个和自己系统匹配的)。2、通过网卡
2017-02-28 22:19:22 6288
原创 linux笔记-ftp
#############################vsftpd服务############################1.什么是ftpFTP 是 TCP/IP 协议组中的协议之一,是英文FileTransfer Protocol的缩写。该协议是Internet文件传送的基础,它由一系列规格说明文档组成,目标是提高文件的共享性,提供非直接使用远程计算机,使存储
2017-02-27 16:29:12 382
原创 yum相关配置(脚本)
服务端脚本#!/bin/bashmkdir /iso /rhel mv /mnt/rhel* /iso ##将mnt目录下的镜像文件移动到指定目录mount /iso/rhel-server-7.2-x86_64-dvd.iso /rhel ##挂载rm -fr /etc/yum.repos.d/* ##删除原配置文件##写配置文件cat >>
2017-02-13 21:32:59 401
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人