Linux下Rsync+Sersync搭建与配置,实现日志实时同步

这篇博客介绍了如何在Linux环境下利用Rsync和Sersync搭建日志实时同步系统。文章详细阐述了Rsync+Inotify-tools与Rsync+sersync的区别,并提供了在源服务器和目标服务器上的详细配置步骤,包括关闭SELINUX,开启防火墙端口,安装配置Rsync,创建认证文件,以及调整内核参数和安装Sersync等,以实现高效的数据同步。
摘要由CSDN通过智能技术生成

Linux下Rsync+Sersync搭建与配置,实现日志实时同步

一、简介

1. sersync是基于Inotify开发的,类似于Inotify-tools的工具。

2. sersync可以记录下被监听目录中发生变化的(包括增加、删除、修改)具体某一个文件或某一个目录的名字,然后使用rsync同步的时候,只同步发生变化的这个文件或者这个目录。

二、Rsync+Inotify-tools与Rsync+sersync这两种架构有什么区别?

Rsync+Inotify-tools

1. Inotify-tools只能记录下被监听的目录发生了变化(包括增加、删除、修改),并没有把具体是哪个文件或者哪个目录发生了变化记录下来;

2. rsync在同步的时候,并不知道具体是哪个文件或者哪个目录发生了变化,每次都是对整个目录进行同步,当数据量很大时,整个目录同步非常耗时(rsync要对整个目录遍历查找对比文件),因此,效率很低。

Rsync+sersync

1. sersync可以记录下被监听目录中发生变化的(包括增加、删除、修改)具体某一个文件或某一个目录的名字;

2. rsync在同步的时候,只同步发生变化的这个文件或者这个目录(每次发生变化的数据相对整个同步目录数据来说是很小的,rsync在遍历查找比对文件时,速度很快),因此,效率很高。

小结:当同步的目录数据量不大时,建议使用Rsync+Inotify-tools;当数据量很大(几百G甚至1T以上)、文件很多时,建议使用Rsync+sersync。

三、搭建环境说明

操作系统:CentOS 6.5

源服务器:192.168.3.10 (后面称A); 目录:/usr/local/rsyData/webLog、/usr/local/rsyData/sysLog

目标服务器:192.168.3.11(后面称B1),  192.168.3.12(后面称B2);  目录:/usr/local/rsyLog/web、/usr/local/rsyLog/sys

四、安装与配置

第一部分:分别在目标服务器B1、B2上的操作

1. 关闭 SELINUX

[root@localhost ~]# vi /etc/selinux/config #编辑防火墙配置文件

#进行一下操作:

#SELINUX=enforcing #注释掉

#SELINUXTYPE=targeted #注释掉

SELINUX=disabled #增加

:wq! #保存,退出

[root@localhost ~]# setenforce 0 #立即生效

2. 开启防火墙tcp 873端口(rsync默认端口

[root@localhost ~]# vi /etc/sysconfig/iptables #编辑防火墙配置文件

#增加下面的内容:

-A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 873 -j ACCEPT

:wq! #保存退出

[root@localhost ~]# /etc/init.d/iptables restart #最后重启防火墙使配置生效

3. 创建rsync用户、用户组

[root@localhost ~]# groupadd rsy #创建组

[root@localhost ~]# useradd -g rsy myRsy #创建用户

[root@localhost ~]# passwd myRsy #设置用户密码

4. 安装Rsync服务端软件

[root@localhost ~]# yum install rsync xinetd #安装

[root@localhost ~]# vi /etc/xinetd.d/rsync #编辑配置文件,设置开机启动rsync

#进行一下操作:

disable = no #修改为no

:wq! #保存退出

[root@localhost ~]# /etc/init.d/xinetd start #启动(CentOS中是以xinetd来管理Rsync服务的)

5. 创建rsyncd.conf配置文件

[root@localhost ~]# vi /etc/rsyncd.conf #创建配置文件

#添加以下代码:

#日志文件位置,启动rsync后自动产生这个文件,无需提前创建

log file = /var/log/rsyncd.log

#pid文件的存放位置

pidfile = /var/run/rsyncd.pid

#支持max connections参数的锁文件

lock file = /var/run/rsync.lock

#用户认证配置文件,里面保存用户名称和密码,后面会创建这个文件

secrets file = /etc/rsync.pass

#rsync启动时欢迎信息页面文件位置(文件内容自定义)

motd file = /etc/rsyncd.motd

从程序员的视角,看计算机系统! 本书适用于那些想要写出更快、更可靠程序的程序员。通过掌握程序是如何映射到系统上,以及程序是如何执行的,读者能够更好的理解程序的行为为什么是这样的,以及效率低下是如何造成的。粗略来看,计算机系统包括处理器和存储器硬件、编译器、操作系统和网络互连环境。而通过程序员的视角,读者可以清晰地明白学习计算机系统的内部工作原理会对他们今后作为计算机科学研究者和工程师的工作有进一步的帮助。它还有助于为进一步学习计算机体系结构、操作系统、编译器和网络互连做好准备。 本书的主要论题包括:数据表示、C程序的机器级表示、处理器结构,程序优化、存储器层次结构、链接、异常控制流、虚拟存储器和存储器管理、系统级I/O、网络编程和并发编程。书中所覆盖的内容主要是这些方面是如何影响应用和系统程序员的。例如,在讲述数据表示时,本书说明了用来表示数字的表示方法是有限的,它能够近似地表示整数和实数,但是这种表示方法是有限制的,程序员必须了解。在讲述高速缓存时,本书讨论了矩阵代码中的循环变量的顺序是如何影响程序的性能的。在讨论网络互连时,本书描述了并发服务器如何能有效地处理来自多个客户端的请求。 本书基于Intel兼容(IA32)机器,在Unix或者相关的操作系统(例如,Linux)上执行C程序。虽然书中包括了一些帮助读者将Java转化成C的提示,但是还是要求读者对C或者C++有一定的了解。 您可以通过本书的Web网站www.csapp.cs.cmu.edu获得完整的资料,包括实验和作业,授课笔记和代码示例。 本书英文版久负盛名,被众多专业人士称为“最伟大的计算机教材”之一,著名的美国卡内基梅隆大学计算机科学系一直将本书作为教材使用,程序员眼中的透彻讲述计算机系统的扛鼎之作。作者Randal E. Bryant是卡耐基梅隆大学的计算机科学系主任,ACM和IEEE双院士(Fellow),其研究成果多次获得ACM和IEEE颁发的大奖。   本书共分十三章,分别介绍了信息的表示和处理、程序的机器级表示、处理器体系结构、存储器层次结构、静态和动态链接、虚拟存储器、系统级I/O、网络编程和并发编程等精彩内容。其目的是解释计算机系统的所有本质概念,并向读者展示这些概念是如何实际地影响应用程序的正确性、性能和实用性。与其他主要针对系统构造人员的系统类书籍不同,这本书是写给程序员的,是从程序员的角度来描述的。本书为软件和硬件之间搭起了一个桥梁,它给出了一种帮助读者分别从硬件和软件的角度去理解一个程序及其行为的途径,这也填补了国内计算机系统教学中的一个空白。本书的最大优点是帮助读者理解概念,让读者很清楚地在脑海中构造一个层次型的计算机系统,从最低层数据在内存中的表示(如我们一直陌生的浮点数表示),到流水线指令的构成,到虚拟存储器,到编译系统,到动态加载库,到最后的用户应用。   本书提供了大量的例子和练习及部分答案。尤其值得一提的是,对于每一个基本概念都有相应的笔头或程序试验,加深读者的理解。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值