- 博客(43)
- 资源 (4)
- 收藏
- 关注
RSS订阅
原创 【ELK日志采集】filebeat日志采集及错误Provided Grok expressions do not match field value解决
ELK日志入库失败问题解决
2022-03-01 15:20:10
2631
原创 MongoDB集群升级扩容操作
本文重点描述：MongoDB集群模式采用3台物理服务器，硬件配置：256G内存，3*3TSSD RAID5；现有磁盘空间使用量75%已经达到空间阈值；需要升级磁盘空间以及更换raid10（这里官方推荐读写性能更高），硬件磁盘升级为：6*3TSSD RAID10。主服务器（Primary） 包含了所有的改变操作（写）的日志。副本服务器（Secondary）集群包含有所有的主服务器数据，因此当主服务器挂掉了，就会在副本服务器上重新选取一个成为主服务器。
2023-04-27 16:37:07
1060
1
原创 elasticsearch集群索引自动化双副本设置脚本
本文主要说明es集群索引单福本设置双副本操作，分为手动执行命令及自动化脚本执行。自动化脚本运行主要涉及：自动检查集群索引副本状态，检查集群健康状态，只有当前集群为green状态才可以执行索引双副本操作，等集群恢复状态green后才执行下一个副本操作。自动脚本需要添加到计划任务可以设置分钟或小时等定时执行自动检测副本执行。自动化脚本需要配置定时任务定期自动检测执行双副本操作。
2023-04-25 11:24:02
394
原创 elasticsearch集群数据索引迁移自动化脚本
日常维护elasticsearch集群会出现新老集群数据迁移，这里使用的是snapshot api是Elasticsearch用于对数据进行备份和恢复的一组api接口，可以通过snapshot api进行跨集群的数据迁移，原理就是从源ES集群创建数据快照，然后在目标ES集群中进行恢复。1、新老集群修改集群配置文件： vim elasticsearch.yml repo: ["/snapshot"]2、创建NFS共享目录 旧集群和新集群挂载同一个目录并配置权限确保目
2022-12-08 00:00:00
682
原创 elasticsearch创建副本自动化脚本
1、 ES索引副本自动检测并设置副本，日志记录创建副本过程。2、加入定时任务监控非副本自动设置。查看集群索引副本状况：curl -H 'Content-Type:application/json' -XGET http://192.168.1.1:9201/*/_settings?pretty |grep -E "provided_name|number_of_replicas"配置索引副本操作：curl -H 'Content-Type:application/json' -XPUT 'http:
2022-12-07 14:20:42
497
原创 centos7部署elk日志系统
ELK具体安装可以参考下面链接centos7部署elk日志系统 - 走看看一、创建Elk目录，下载软件压缩包 登录系统后，进入opt目录，创建Elk文件夹 [root@localhost opt]# cd /opt/ [root@localhost opt]# mkdirhttp://t.zoukankan.com/wjs2019-p-14690727.html安装logstash安装下面操作！！！解压压缩包，把解压之后的文件移动到ElK目录下，编辑配置文件config／logstash.yml#打开并修
2022-07-05 17:35:18
501
原创 NGINX 域名及IP白名单拦截，Referer防盗链设置
针对线上对外NGINX代理服务安全非常重要，接下来针对域名IP白名单配置来拦截非法请求，同时通过Referer防盗链设置判断该请求是否为合法请求，具体看本文测试操作结果。 server_name www.test.com 172.17.80.104; if ($http_Host !~* ^www.test.com|172.17.80.104$) { return 500; } server_n
2022-07-05 16:46:08
1574
原创 AWK时间计算及AWK时间大于或小于统计
本文介绍操作通过AWK命令工具计算日志文件时间求和取平均值过程，以及通过AWK命令工具截取某个时间大于等于小于等得到结果。例如：查询耗时小于等于400毫秒结果：样例数据文件内容[2022-03-16 11:13:51] [INFO ] [HTTP-8080-42] {com.test.service.impl.InterfaceServiceImpl:301}-账户：3425heskgi83453495het3425，接口：gettest，流水号：220316111345...
2022-05-13 14:46:03
2711
原创 centos 安装phantomjs
环境安装：yum install bzip2 fontconfigfreetype fontconfig mkfontscale -ycd /opt/pgtar -xjvf phantomjs-2.1.1-linux-x86_64.tar.bz2创建软连接ln -s /opt/pg/phantomjs-2.1.1-linux-x86_64/bin/phantomjs /usr/bin/phantomjs查看结果：配置权限：chmod 755 /opt/pg/pha..
2022-05-05 11:31:12
1341
原创 centos 安装LibreOffice word转PDF导出
安装LibreOffice_5.4.6.2_Linux_x86-64_rpm word转PDF导出上传安装服务包，下载路径：centos安装LibreOffice实现word转换PDF操作-Linux文档类资源-CSDN下载centos安装LibreOffice实现word转换PDF操作安装LibreOffice_5.4更多下载资源、学习资料请访问CSDN下载频道.https://download.csdn.net/download/duanph/85237060解压安装包：tar -zxvf
2022-04-28 17:00:29
1678
原创 nginx日志切割简单实用
NGINX自带日志切割功能方便实用，可以按天、小时月等生成日志文件。NGINX日志内容格式定义log_format nginx_log_json '{"nginx_time":"$time_iso8601","remote_addr":"$remote_addr","http_host":"$http_host","request_completion":"$request_completion","connection":"$connection","connec...
2022-04-26 14:20:31
2004
原创 centos7安装Python3.10.4最新稳定版
服务环境：centos7 安装Python3.10.4最新稳定版，以下为安装过程操作。Python各个版本路径：python所有版本https://www.python.org/ftp/python/Python3.10.4下各版本https://www.python.org/ftp/python/3.10.4/https://www.python.org/ftp/python/3.10.4/下载python最新稳定版wget https://www.python.or...
2022-04-25 17:37:26
3747
原创 centos创建逻辑卷LVM及LVM扩容操作
lvm全称“Logical Volume Manager”，中文意思为“逻辑卷管理”，是Linux环境下对磁盘分区进行管理的一种机制，其创建的初衷是为了解决硬盘设备在创建完分区后不易修改分区大小的权限。物理卷（physical volume）：物理卷就是指硬盘分区或从逻辑上与磁盘分区具有同样功能的设备(如RAID)，是LVM的基本存储逻辑块，但和基本的物理存储介质（如分区、磁盘等）比较，却包含有与LVM相关的管理参数。卷组（Volume Group）：LVM卷组类似于非LVM系统中的物理硬...
2022-04-13 16:16:58
3123
原创 centos 系统配置优化
以下配置在线上业务平台系统上使用，无任何问题，可放心！！！cat /etc/sysctl.conf#1是开启SYN Cookies，当出现SYN等待队列溢出时，启用Cookies来处，理，可防范少量SYN攻击，默认是0关闭net.ipv4.tcp_syncookies = 1#1是开启重用，允许讲TIME_AIT sockets重新用于新的TCP连接，默认是0关闭net.ipv4.tcp_tw_reuse = 1#TCP失败重传次数，默认是15，减少次数可释放内核资源net.ip
2022-04-13 15:59:09
393
原创 NFS文件共享部署
注意说明： NFS文件系统需要root权限启动服务（服务端口号无法设置1024以下）传输协议 端口1 端口2 TCP 111 2049 UDP 111 4096 安装nfs服务需要的环境包 yum install nfs-utils rpcbind –y编辑共享配置文件及ip访问限制 vim /etc/exports /opt/test 192.168.1.101...
2022-04-13 15:19:38
1242
原创 【ELK日志采集】ELK 收集idrac日志
本文主要介绍通过rsyslog日志系统实现idrac机房服务器硬件信息日志收集，作为Linux系统运维人员必备。简单高效的通过ELK检查服务器硬件资源状况，减少人员机房巡检操作。环境说明：日志来源服务器：Dell PowerEdge R720日志收集服务：rsyslog日志处理服务：ELKrsyslog日志收集服务搭建安装rsyslog服务（环境centos系统）yum install rsyslog -y启用U...
2022-04-11 16:55:22
1646
原创 【windows】系统账户策略的应用
本文主要介绍Windows系统账号的创建、密码复杂度、账户密码使用期限等。围绕本地安全策略、账户策略进行详细的配置说明。以管理员账户登录，创建普通UserA。单击“开始”菜单→“控制面板”→“系统和安全”→“管理工具”，然后双击“本地安全策略”，打开本地安全策略。选择“账户策略”→“密码策略”，设置密码长度最小值为7，启用密码必须符合复杂性要求，密码使用最长时间为30天。选择“账户策略”→“账户锁定策略”，设置账户阈值为3天。运行gpu
2022-04-11 14:08:03
2212
原创 【文件存储】FastDFS集群部署
FastDFS相关服务说明FastDFS是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size < 500MB）为载体的在线服务。Client客户端 实现文件上传下载的服务器，就是我们自己的项目所部署在的服务器。通过专有接口，使用 TCP/IP 协议与跟踪服务器或存储服务器进行数据交互。FastDFS 向使用者提供基本文件访问...
2022-04-07 16:00:14
2664
原创 【Python】微信发送信息
Python微信发送信息cat /opt/shell/weixin.py#!/usr/bin/python# -*- coding:utf-8 -*-import sysimport urllib2import timeimport jsonimport requestsreload(sys)sys.setdefaultencoding('utf-8')touser = sys.argv[1]title = sys.argv[2]content = sys.argv[3]
2022-03-17 17:12:29
316
原创 【linux shell】服务器系统自动化巡检脚本资源状况统计
运维服务器系统的时候需要定期检查服务器系统资源状况，如CPU、内存、硬盘这些资源消耗信息统计，在这种情况下也可以用开源的监控系统导出相应的需求信息或者直观的通过监控平台去查看资源状况；本文将介绍另一种方式通过Linux shell脚本实现服务器系统资源状况信息统计；因在项目上客户服务器平台上不允许安装与项目无关的服务（监控软件），所以只能通过自动化脚本解决。服务器系统资源状况统计巡检脚本：vim system_check_server_auto.sh #!/bin/bash...
2022-03-17 16:50:44
2937
原创 FileZilla 客户端软件使用操作手册
FileZilla 客户端软件上传下载使用操作手册客户端软件：点击左上角文件，站点管理：/data/htdocs程序目录
2022-03-10 11:27:49
298
原创 SQL SERVER 数据类型详解
数据类型 类型 描 述 bit 整型 bit 数据类型是整型，其值只能是0、1或空值。这种数据类型用于存储只有两种可能值的数据，如Yes 或No、True 或Fa lse 、On 或Off int 整型 int 数据类型可以存储从- 231(-2147483648)到231 (2147483 647)...
2022-03-10 11:18:43
224
原创 Windows server FTP服务部署
ftp服务部署：先建立文件：服务器管理器添加ftp发布服务：设置及启动ftp站点：设置虚拟机和物理机连接：查看一下虚拟机的Ip地址先关闭防火墙：给本地虚拟网卡1设置ip：访问ftp服务器：Serv-u...
2022-03-10 11:13:15
1238
原创 【网络设备】Cisco路由器密码重置及配置
1.简述Cisco路由器的启动过程。2.简述路由器密码恢复思路。3.实现管理员主机对交换机和路由器的远程管理设备上配置的密码都要被加密1.简述Cisco路由器的启动过程。答⑴：路由器启动的顺序为，先开机自动检测硬件是否正常。之后运行系统的引导文件。最后是加载默认NVRAM中的配置文件。[/color]2.简述路由器密码恢复思路。答⑵：首先拔掉电源，重启路由器。按住键盘的Ctrl+Breack 进入调试模式ROMMonitor（相当于计算机的BISO设置）在命令行输入 R>conf...
2022-03-10 11:01:02
3796
原创 【网络设备】交换机相同VLAN之间互通
1.创建vlan2---4，分别把pc分到各个vlan，实现相同vlan之间的通信。之后在交换机1与交换机2之间vlan3不能通信，交换机2与交换机3之间vlan4不能通信。写出配置并解释2012-12-26 12:11 上传下载附件 (31.39 KB) 2.看下面的图，分析哪几个pc可能通信，那几个不能通信，并解释。1.创建vlan2---4，分别把pc分到各个vlan，实现相同vlan之间的通信。之后在交换机1与交换机2之间vlan3不能通信，交换机2与交换机3之间vlan4不能通信
2022-03-10 10:45:56
4725
原创 【网络设备】交换机路由器理论知识
1.IP地址与MAC地址都是全局唯一的地址，为什么在数据转发过程中都得要有？答⑴：简单的来说，IP地址与MAC地址 就好比你要发送快递一样。IP是包裹上的 寄信地址 以及 目标地址~ 但它就是一张纸而已记录了收发双方的信息，是不能保证把包裹安全发送到目标的，所以必须依靠邮递员。也就是MAC地址~在数据转发的过程中~IP也就是寄信人与收信人 是不会变的。一直在变的就是不同区域收件派件的邮递员 也就是MAC地址。他们负责准确安全的把包裹/数据 发送到目标主机。所以，在数据的转发过程中。IP地址 与 MAC地址
2022-03-10 10:41:31
299
原创 【网络设备】单臂路由和STP配置及理论
解释 单臂路由的缺陷，以及三层交换机的转发原理。 二.解释STP的作用与BPDU数据包的重要的几个参数. 三.解释STP端口状态以及作用. 四.SW-1为VLAN1的根网桥，SW-2为VLAN2的根网桥，SW-3为VLAN3的根网桥；同时查看各个交换机上的端口的状态并解释. 一、解释单臂路由的缺陷，以及三层交换机的转发原理。1、单臂路由缺陷在于，网络中数据量过大，会使骨干链路压力过大产生瓶颈。2、三层交换，数据的第一个包通过三层交换时，三层交换会查看自己的路由列表转发第一个包，在转发第一..
2022-03-09 19:54:30
658
原创 【网络设备】访问不同的IP地址使用不同的ISP线路
访问不同的IP地址使用不同的ISP线路 在公司内网的员工PC能通过静态NAT、动态NAT、PAT三种方式上网；同时，公司内网的服务器提供Web与Ftp的服务，不同ISP的用户通过不同地址访问内网服务器 注意：尽可能公网用公网IP地址，私网用私网IP地址。（根据实际情况可以选择只做一个ISP的图） 2013-1-28 12:14 上传 下载附件 (37 KB) 根...
2022-03-09 19:25:24
1214
原创 【网络设备】switch vlan划分详细步骤
交换机新建vlanvlan 2vlan 3vlan 4给vlan设置ip：interface vlan 1 ip address 192.168.1.100 255.255.255.0 no shutdowninterface vlan 2 ip address 192.168.2.100 255.255.255.0 no shutdowninterface vlan 3 ip address 192.168.3.10...
2022-03-09 19:19:52
3130
原创 Windows Server 2008域控在新林中新建域操作
环境说明某公司有100多台计算机和100多名员工，现在需要集中管理计算机，用户账户以及其他网络资源、需要建立Windows Server 2008 域，域名为 benet.com。需求描述在服务器DCO1上安装活动目录，域名为“benet.con”。将客户机加入Clien01加入域。创建域用户账户UserA.推荐步骤1检查DC01是否满足安装活动目录的条件。2在DC01上安装活动目录3创建域用户账户UserA.4将客户机Clien01加入域配置首选DNS地...
2022-03-08 19:29:47
752
原创 Windows Server 2008 增加域控制器
环境说明 公司搭建了Windows Server 2008 域benet.com、域中先在有一台域控制器DC 01、DC01上有用户账户ＵｓｅｒＡ和计算机账户Ｃｌｉｅｎ０１。为了加强域的可用性，现在需要安装第二台域控制器ＤＣ０２，该如何实现？需求描述在客户机添加额外域控制器ＤＣ０２．为客户机Ｃｌｉｅｎｔ０１添加第二台ＤＮＳ地址，使在ＤＣ０１机的时候用户可以正常登录域。建立子域控制器：...
2022-03-08 19:25:17
497
原创 powershll系统管理
在c盘根目录下创建一个名为benet的文件夹在此文件夹下创建一个名为test.txt的文件，文件里添加如下内容"hello benet"显示benet文件夹里的所有文件4.删除test.txt文件,删除benet文件夹5查看本机所的事件日志6.查看本机前10条系统日志7.查看本机前5条类型为警告的系统日志8.查看本机关于warning的应用程序日志9.显示本机第1条系统日志的详细信息10.查看事件日志中2012年3月的所有类型
2022-03-08 19:11:48
161
原创 Apache与Tomcat的整合
案例需求为Apache HTTP Server服务器添加JSP网页支持。 能够访问Tomcat容器的Web管理界面，以便管理各种JSP、Servelet应用。知识提示在各种企业级网站应用系统中，JSP也是使用较多的一种网站开发语言，对于这样的网站服务器，必须能够支持Java环境、JSP解析，比如安装Tomcat、Jboss等JSP容器。另外一方面，Apache HTTP Server对静态HTML页面的处理能力要更加优秀一些，因此若能将Apache与Tomcat等JSP容器整合在一起使用，将可以获得
2022-03-08 19:02:24
1697
原创 Maxscale Keepalived MySQL实现高可用读写分离集群
1、Maxscale Keepalived MySQL实现高可用读写分离集群2、Maxscale代理MySQL实现读写分离主（写）从（读）故障切换高可用，keepalived负载均衡服务解决maxscale单点故障问题实现高可用。3、包含安装下载文件包
2022-03-08 15:36:58
823
原创 Linux 系统LVM磁盘分区
安装环境yum install lvm2 -y初始化pvcreate /dev/sdc创建逻辑卷组vgcreate data_group2 /dev/sdc删除逻辑卷组vgremove loggroup2 /dev/sdc创建逻辑卷LV 名称LOGVG 卷组data_group提供空间lvcreate -L 4.9T -n lvm_data data_grouplvcreate -l +10...
2022-03-04 01:00:00
242
原创 Zookeeper集群部署
1、服务器环境： 物理服务器：3台 ；zookeeper集群节点3个，安装依赖java环境 IP 部署服务 部署路径 脚本路径 192.168.1.1 zookeeper /opt/zookeeper /opt/shell/zookeeper.sh 192.168.1.2 zookeeper ...
2022-03-03 00:15:00
2008
原创 【Windows bat】Windows环境下文件MD5校验脚本
1、校验脚本功能说明：... 12、校验脚本内容：... 13、校验脚本测试：... 44、校验脚本测试结果：... 45、校验脚本测试日志：... 46、Windows计划任务添加... 51、校验脚本功能说明：1.获取待检查状态的数据文件（*.verify），并生成该文件的md5值，输出一个ftp服务端校验文件(文件名称.server.md5)2.将上面校验结果日志输出到指定目录，并按照每天一个文件输出。3.读取*.server.md5文件，判定数据文件是否还存在，不
2022-03-02 11:39:40
796
centos安装LibreOffice实现word转换PDF操作
2022-04-28
MariaDB MaxScale 2.5版本
2022-03-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人