day27-Rsync和NFS服务

于 2024-08-13 12:51:43 发布
阅读量95 收藏 3
点赞数 2
分类专栏： Linux 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36262295/article/details/141161137
版权
01.Rsync 案例
可重复使用。
1.客户端提前准备存放的备份的目录，目录规则如下:
/backup/nfs_172.16.1.31_2018-09-02
需求: 定时任务配置文件 /etc/passwd
目录创建方式:
[root@web01:~]#mkdir -p /backup/`hostname`_`hostname
-I|awk '{print $1}'`_`date +%F`
[root@web01:~]#ll /backup/
total 0
drwxr-xr-x 2 root root 6 Jul 31 11:37 web01_10.0.0.7_2024-07-31


2.客户端在本地打包备份(系统配置文件、应用配置等)拷贝至/backup/nfs_172.16.1.31_2018-09-02
[root@web01:~]#code_dir=/backup/`hostname`_`hostname
-I|awk '{print $1}'`_`date +%F`
[root@web01:~]#echo $code_dir
/backup/web01_10.0.0.7_2024-07-31
[root@web01:~]#tar zcf $code_dir/etc.tar.gz /etc
tar: Removing leading `/' from member names
[root@web01:~]#ll $code_dir/
total 5220
-rw-r--r-- 1 root root 5342620 Jul 31 11:38 etc.tar.gz
[root@web01:~]#ll /backup/web01_10.0.0.7_2024-07-31/
total 5220
-rw-r--r-- 1 root root 5342620 Jul 31 11:38 etc.tar.gz



3.客户端最后将备份的数据进行推送至备份服务器
rsync -avz $code_dir rsync_backup@172.16.1.41::backup
4.客户端每天凌晨1点定时执行该脚本
00 01 * * * root  sh xxx.sh   # 测试每分钟执行一次

5.客户端服务器本地保留最近7天的数据, 避免浪费磁盘空间 写入脚本
模拟7天前的时间 date -s
find /backup/* -mtime +7|xargs rm -rf




[root@web01:~]#mkdir -p /server/scripts
[root@web01:~]#cd /server/scripts
[root@web01:scripts]#cat backup.sh
#设置变量
ba_dir=/backup/`hostname`_`hostname -I|awk '{print $2}'`_`date +%F`

#1.创建目录
mkdir -p $ba_dir

#2.打包重要的文件放到创建好的目录
tar zcf $ba_dir/etc.tar.gz /etc/hosts /etc/passwd &>/dev/null

#3.将打包的文件传送到backup服务端
export RSYNC_PASSWORD=123456
rsync -avz $ba_dir rsync_backup@172.16.1.41::backup

#4.查找修改时间大于7天前的文件然后删除
find /backup/* -mtime +7|xargs rm -rf

cat /etc/crontab
00 00 * * * root sh /server/scripts/backup.sh &>/dev/null
02.NFS 服务

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

过程了解:
1.用户进程访问NFS客户端，使用不同的函数对数据进行处理
2.NFS客户端通过TCP/IP的方式传递给NFS服务端。
3.NFS服务端接收到请求后，会先调用portmap进程进行端口映射。
4.nfsd进程用于判断NFS客户端是否拥有权限连接NFS服务端。
5.Rpc.mount进程判断客户端是否有对应的权限进行验证。
6.idmap进程实现用户映射和压缩
7.最后NFS服务端会将对应请求的函数转换为本地能识别的命令，传递至内核，由内核驱动硬件。*
注意: rpc是一个远程过程调用，那么使用nfs必须有rpc服务

作用: 实现数据一致性
NFS服务器: 10.0.0.31  172.16.1.31
1.安装NFS服务
[root@nfs:~]#yum -y install nfs-utils

2.配置NFS服务
配置文件: /etc/exports 默认为空文件
[root@nfs:~]#vim /etc/exports
[root@nfs:~]#cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash)

注释信息:
/data           #共享的目录
172.16.1.0/24   # 允许哪个网段可以挂载我
rw				# 挂载的参数 可读写
sync			# 同步到内核和磁盘
all_squash      # 将所有的用户压缩成虚拟用户



3.根据配置创建数据信息
[root@nfs:~]#mkdir /data
[root@nfs:~]#ll -d /data
drwxr-xr-x 2 root root 6 Aug  1 10:05 /data
属主属组修改为匿名用户
[root@nfs:~]#chown nobody.nobody /data/
[root@nfs:~]#ll -d /data/
drwxr-xr-x 2 nobody nobody 6 Aug  1 10:05 /data/


4.启动NFS服务
[root@nfs:~]#systemctl start nfs
[root@nfs:~]#systemctl enable nfs


查看配置文件是否正确，和默认的参数
[root@nfs:~]#ll -d /data
drwxr-xr-x 2 root root 6 Aug  1 10:05 /data
[root@nfs:~]#cat /var/lib/nfs/etab
/data	172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,rw,secure,root_squash,all_squash)
[root@nfs:~]#grep 65534 /etc/passwd
nobody:x:65534:65534:Kernel Overflow User:/:/sbin/nologin
属主属组修改为匿名用户
[root@nfs:~]#chown nobody.nobody /data/




5.测试NFS服务
web01测试:
因为需要依赖rpcbind协议，所以客户端都需要安装nfs-utils，里面包含了rpcbind协议
第一步: 客户端只安装，不配置，不启动服务。
[root@web01:~]#yum -y install nfs-utils

第二步: 查看服务端共享的目录
[root@web01:~]#showmount -e 172.16.1.31
Export list for 172.16.1.31:
/data 172.16.1.0/24

第三步: 挂载使用
[root@web01:~]#mkdir /code
[root@web01:~]#mount -t nfs 172.16.1.31:/data /code
[root@web01:~]#df -h
Filesystem             Size  Used Avail Use% Mounted on
devtmpfs               459M     0  459M   0% /dev
tmpfs                  475M     0  475M   0% /dev/shm
tmpfs                  475M   43M  432M   9% /run
tmpfs                  475M     0  475M   0% /sys/fs/cgroup
/dev/mapper/klas-root   47G  3.8G   44G   8% /
tmpfs                  475M     0  475M   0% /tmp
/dev/sda1             1014M  169M  846M  17% /boot
tmpfs                   95M     0   95M   0% /run/user/0
172.16.1.31:/data       47G  3.8G   44G   8% /code

第四步: 测试否可以写入内容
[root@web01:~]#cd /code/
[root@web01:code]#ll
total 0
[root@web01:code]#touch a.txt
[root@web01:code]#ll
total 0
-rw-r--r-- 1 nobody nobody 0 Aug  1 10:21 a.txt

第五步: 写入开机自动挂载 建议写到/etc/rc.local
/etc/rc.local 是最后才执行的
[root@web01:code]#tail -1 /etc/fstab
172.16.1.31:/data 	/code			nfs     defaults 0 0

测试fstab配置
[root@web01:~]#mount -a
[root@web01:~]#df -h
Filesystem             Size  Used Avail Use% Mounted on
devtmpfs               459M     0  459M   0% /dev
tmpfs                  475M     0  475M   0% /dev/shm
tmpfs                  475M   43M  432M   9% /run
tmpfs                  475M     0  475M   0% /sys/fs/cgroup
/dev/mapper/klas-root   47G  3.8G   44G   8% /
tmpfs                  475M     0  475M   0% /tmp
/dev/sda1             1014M  169M  846M  17% /boot
tmpfs                   95M     0   95M   0% /run/user/0
172.16.1.31:/data       47G  3.8G   44G   8% /code
03.挂载夯住
1.挂载到NFS
2.将NFS的内网卡关闭
3.df -h夯住

解决方法:
1.启动NFS网卡
2.强制卸载
[root@web01:~]#umount -f /code
3.如果不知道挂载点，查看/proc/mounts信息
[root@web01:~]#cat /proc/mounts
...
...
172.16.1.31:/data /code nfs4 rw,relatime,vers=4.2,rsize=131072,wsize=131072,namlen=255,hard,proto=tcp,timeo=600,retrans=2,sec=sys,clientaddr=172.16.1.7,local_lock=none,addr=172.16.1.31 0 0
然后卸载:
[root@web01:~]#umount -f /code

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

04.NFS 参数
1.rw                       # 表示读写
2.ro                       # 表示只读 只能看
3.all_squash               # 所有用户进行压缩成匿名用户
4.anonuid=666,anongid=666  # 指定匿名用户uid为666
5.sync			 	       # 同步写入磁盘和内存


测试ro和rw参数
[root@nfs:~]#cat /etc/exports
/data/baidu 172.16.1.0/24(rw,sync,all_squash)
/data/oldboy 172.16.1.0/24(ro,sync,all_squash)

重启生效
[root@nfs:~]#systemctl restart nfs

[root@nfs:~]#mkdir /data/{baidu,oldboy}
[root@nfs:~]#ll /data/
total 0
-rw-r--r-- 1 nobody nobody 0 Aug  1 10:21 a.txt
drwxr-xr-x 2 root   root   6 Aug  1 10:48 baidu
drwxr-xr-x 2 root   root   6 Aug  1 10:48 oldboy
[root@nfs:~]#chown -R nobody.nobody /data/
[root@nfs:~]#ll /data/
total 0
-rw-r--r-- 1 nobody nobody 0 Aug  1 10:21 a.txt
drwxr-xr-x 2 nobody nobody 6 Aug  1 10:48 baidu
drwxr-xr-x 2 nobody nobody 6 Aug  1 10:48 oldboy




客户端挂载:
[root@web01:~]#mkdir /code/{oldboy,baidu}
[root@web01:~]#ll /code/
total 0
drwxr-xr-x 2 root root 6 Aug  1 10:50 baidu
drwxr-xr-x 2 root root 6 Aug  1 10:50 oldboy

[root@web01:~]#mount -t nfs 172.16.1.31:/data/oldboy /code/oldboy
[root@web01:~]#mount -t nfs 172.16.1.31:/data/baidu /code/baidu

[root@web01:~]#df -h
Filesystem                Size  Used Avail Use% Mounted on
devtmpfs                  459M     0  459M   0% /dev
tmpfs                     475M     0  475M   0% /dev/shm
tmpfs                     475M   43M  432M   9% /run
tmpfs                     475M     0  475M   0% /sys/fs/cgroup
/dev/mapper/klas-root      47G  3.8G   44G   8% /
tmpfs                     475M     0  475M   0% /tmp
/dev/sda1                1014M  169M  846M  17% /boot
tmpfs                      95M     0   95M   0% /run/user/0
172.16.1.31:/data/oldboy   47G  3.8G   44G   8% /code/oldboy
172.16.1.31:/data/baidu    47G  3.8G   44G   8% /code/baidu
[root@web01:~]#touch /code/oldboy/oldboy.txt
touch: cannot touch '/code/oldboy/oldboy.txt': Read-only file system
[root@web01:~]#touch /code/baidu/baidu.txt



指定虚拟用户:
[root@nfs:~]#cat /etc/exports
/data/baidu 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)
/data/oldboy 172.16.1.0/24(ro,sync,all_squash)

重启生效
[root@nfs:~]#systemctl restart nfs

检查配置结果:
[root@nfs:~]#cat /var/lib/nfs/etab
/data/oldboy	172.16.1.0/24(ro,sync,wdelay,hide,nocrossmnt,secure,root_squash,all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,ro,secure,root_squash,all_squash)
/data/baidu	172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=666,anongid=666,sec=sys,rw,secure,root_squash,all_squash)

[root@nfs:~]#grep 666 /etc/passwd
[root@nfs:~]#groupadd -g666 www
[root@nfs:~]#useradd -u666 -g666 -M -s /sbin/nologin www

/data/baidu授权属主属组为www
[root@nfs:~]#chown www.www /data/baidu
[root@nfs:~]#ll /data/baidu
total 0
-rw-r--r-- 1 nobody nobody 0 Aug  1 10:52 baidu.txt
[root@nfs:~]#ll -d /data/baidu
drwxr-xr-x 2 www www 23 Aug  1 10:52 /data/baidu



NFS完整配置:
[root@nfs:~]#cat /etc/exports
/data/baidu 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)
05.NFS 案例

*准备 3 台虚拟机服务器，并且请按照要求搭建配置 NFS 服务。
NFS 服务端（A）10.0.0.31 172.16.1.31
NFS 客户端（B）10.0.0.7
NFS 客户端（C）10.0.0.41 1.在 NFS 服务端(A)上共享/data/w(可写)及/data/r(只读) 2.在 NFS 客户端(B/C)上进行挂载

带脑子的CV工程师
关注
  • 2
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
day32--Linux之综合架构-rsync
流星花雨的博客
10-18 164
备份 1.什么是备份 给源文件增加一个副本. U盘拷贝 2.为什么要做备份 1.一些比较重要的数据需要备份 2.防止因为误操作而造成损失 3.能够快速回复 3.能不能不做备份 根据文件是否重要来选择是否备份,若文件不重要则可以不做备份 4.备份使用什么方式 1.全量备份 如cp 每次都是将所有文件再拷贝一份到指定位置,不会过滤掉指定位置已有的备份文件中的内容,效率低下 2...
day26-rsync
最新发布
qq_36262295的博客
08-13 217
1 .Rsync可以实现增量的备份(主机和主机之间的数据传输) 2 .面试点你们公司用得什么架构 CS/BS架构Client/Server 客户端和服务端 类似客户端的游戏 王者荣耀 吃鸡 英雄联盟Browse/Server 浏览器和服务端 类似网页游戏 使用浏览器访问的服务都是BS架构 3 .Rsync默认监听端口873 4 .全量备份和增量备份全量备份优缺点: 占用带宽 磁盘IO 占用磁盘空间 数据安全不易丢失增量备份优缺点: 速度快 占用较少的磁盘IO 节省磁盘空间 数据易丢失(不完整)
day20-FTP、NFS服务
爪蛙毁一生的博客
07-10 138
FTP、NFS以及SAMBA服务 一、FTP服务 1、Linux下ftp客户端管理工具 ftp、lftp都是Linux下ftp的客户端管理工具，但是需要独立安装 # yum install ftp lftp -y ☆ ftp工具 # ftp 10.1.1.10 Connected to 10.1.1.10 (10.1.1.10). 220 (vsFTPd 3.0.2) Name (10.1.1.10:root): 输入FTP的账号 331 Please specify the password. Pas
架构期day3-Rsync结合inotif与NFS介绍
作者的博客园已搬家到CSDN，访问博客园主页将默认跳转至CSDN
11-19 217
一、Rsync常用参数 1.常用参数 -a #归档模式传输, 等于-tropgDl -t -r -o -p -g -D -l -v #详细模式输出, 打印速率, 文件数量等 -z #传输时进行压缩以提高效率 -r #递归传输目录及子目录，即目录下得所有目录都同样传输。 -t #保持文件时间信息 -o #保持文件属主信息 -p #保持文件权限 -g
day35-rsync备份服务守护进程模式详解
weixin_44695383的博客
05-20 119
rsync守护进程模式详解 预备知识 Push: rsync [OPTION...] SRC... [USER@]HOST::DEST SRC --本地主机上要进行上传的数据信息 [USER@] --指定一个认证用户信息 HOST --指定远程主机IP地址或者主机名称 DEST --将本地主机信息保存到远程主机的什么模块信息 环境准备 rsync服务端 b...
第三周DAY01---nfs、samba的安装和部署
weixin_62379738的博客
07-23 651
动态文件，需要服务器先进行计算，再响应给客户端的内容，例如，登录（用户使用浏览器向服务器发送登录信息账号米，阿木等等，服务器对用户信息进行机选，服务器访问数据库，判断是否可以登录，即将计算结结果生成json或者xml格式的数据响应给客户端的浏览器）用于用户更多的访问静态文件，而动态的服务可能不是很频繁，或者说数据传输数量不是很大，静态文件的流量大，动态数据流量比较小，开发者不希望动态项目和静态项目部署在同一个服务上，静态的访问静态服务，动态的访问动态的服务器。3.配置/etc/exports。
Day 42 Rsync和Nfs
weixin_33961829的博客
09-07 118
Day 42 Rsync和Nfs第1章 Rsync1.1 客户端需求1.客户端每天凌晨01点在服务器本地打包备份(系统配置文件、日志文件、其他目录、应用配置等文件)2.客户端备份的数据必须存放至以主机名_IP地址_当前时间命名的目录中, 例/backup/nfs-server_172.16.1.31_2018-09-02 3.客户端最后通过rsync推送本地已打包好的备份文...
架构期day4-NFS服务
作者的博客园已搬家到CSDN，访问博客园主页将默认跳转至CSDN
11-23 571
NFS 服务 一、NFS介绍 1.使用NFS解决了什么 1.为了实现文件共享 2.为了多台服务器之间数据一致 2.NFS 原理 二、NFS实践 1.环境准备 主机 IP 角色 web01 172.16.1.7 NFS客户端 nfs 172.16.1.31 NFS服务端 2.服务端（172.16.1.31） 1）关闭防火墙和selinux 2）安装NFS和rpcbind [root@nfs ~]# yum install -y nfs-utils rpcbind #注意： Cen
Day40-Rsync企业级备份工具讲解
苦难带不走梦想
03-14 808
无差异复制两台服务器之间，必须要求数据一致，且时时性又不是很高的情况，如两台负载均衡下面Web服务器之间的同步，或者高可用双机配置之间的同步、NFS共享数据的实时复制等。rsync无差异同步非常的危险，而且，有很多的替代方案，因此，生产场景没有特殊的需求，应避免使用。本地有啥，远端就有啥，本地没有的远端有也要删除，会造成服务器端的目录数据丢失，再备份和上传场景一般不需要–delete功能，除非是像NFS实时复制数据到备份服务器上必须要保持两边一致的情形。服务器上老的数据全部被删除，同时把本地新增数据更新。
drone-rsync：Drone插件，用于将文件和目录同步到远程服务器
02-05
drone-rsync：Drone插件，用于将文件和目录同步到远程服务器
ranger-2.1.0-usersync.tar.gz
08-09
1. **用户和组同步**：Ranger Usersync 可以连接到多种身份验证源，如Microsoft Active Directory、LDAP或其他目录服务，将这些系统中的用户和组信息同步到Hadoop集群。这样，用户就可以根据他们在企业认证系统中的...
exodus-rsync:用于rsync的exodus-aware替代产品
03-11
exodus-rsync不是通过rsync协议传输内容，而是通过上传和发布内容。 有关 -rsync如何与Exodus CDN项目系列中的其他项目一起工作的更多信息，请参见。 安装 exodus-rsync是一个独立的linux-amd64二进制文件，可以从...
epel-lsyncd-rsync.7z
02-23
3. `rsync-3.1.2.tar.gz`：rsync是Linux下的一个强大的文件和目录同步工具，它不仅可以进行本地文件同步，还可以跨网络进行远程同步。rsync以其高效和增量同步能力而闻名，只传输文件的差异部分，节省了大量带宽。 ...
dired-rsync：支持来自Emacs Dired缓冲区的rsync
02-05
而dired-rsync这个扩展则进一步增强了这种能力，让用户可以直接在Dired模式下执行rsync命令，实现文件和目录的备份、同步和迁移。 **Emacs与Rsync** Emacs是一款强大的、可高度定制的文本编辑器，具有丰富的内置...
Linux安全与高级应用（四）深入探索MySQL数据库：安装、管理与安全实践
洛秋的博客
08-07 1500
Linux：作为操作系统，提供稳定的运行环境。Apache：作为Web服务器，处理HTTP请求。MySQL：作为数据库管理系统，存储和管理数据。：作为脚本语言，生成动态网页。LAMP平台的优势在于其成本低廉、可定制性强、易于开发、方便易用且安全稳定。这使得LAMP成为许多企业和开发者的首选平台。通过以上步骤，我们完成了LAMP平台的部署及其主要组件的配置和测试。LAMP平台的搭建不仅为Web开发提供了一个强大的环境，同时也展现了其在成本和效率上的优势。
如何解码Linux下事件响应工具evtest的时间戳
weixin_44199156的博客
08-08 335
这里放一下原文链接在开发input子系统驱动时，常常会使用evtest工具进行测试。evtest是打印evdev内核事件的工具，它直接从内核设备读取并打印设备描述的带有值和符号名的事件，可以用来调试鼠标、键盘、触摸板等输入设备evtest通常用于在X.org中调试输入设备的问题，evtest提供了内核的处理信息。根据这些信息，可以判断是内核问题还是X.org问题。输出数据中，“type”是input类型，可以是“EV KEY”、“EV SW”、“EV SND”、“EV LED”或数值；
【Linux 从基础到进阶】进程管理与性能调优
weixin_39372311的博客
08-08 428
通过本文的介绍，您已经了解了 Linux 系统中进程管理和性能调优的基本概念和操作方法。本文提供了适用于 CentOS 和 Ubuntu 系统的具体命令和示例，涵盖了 CPU、内存、I/O 和网络的性能调优策略。合理的进程管理和性能调优可以显著提升系统的稳定性和运行效率。如有任何问题或需要进一步的帮助，请参考CentOS 官方文档和Ubuntu 官方文档或在 CSDN 博客中查阅相关内容。
Linux Java服务管理脚本（启动、停止、查看状态）
程序员阿华的博客
08-08 165
Linux Java服务管理脚本（启动、停止、查看状态）
rsync -a 和 rsync -r有什么差别
07-27
`rsync -a` 和 `rsync -r` 都是用于同步文件和目录的命令选项，在`rsync`工具中，它们都表示递归（recursive）模式，但有细微的差别： 1. `-a` 或 `--archive` (也称为 `--recursive` 加上 `--preserve-links`): 这个选项组合了递归(`-r`) 和保持权限、所有者、组、时间戳和硬链接信息 (`--perms`, `--times`, `--links`). 它使得同步非常接近于源文件的状态，保留原始文件结构，包括软链接。 2. `-r` 或 `--recursive`: 单独的 `--recursive` 选项仅表示递归地扫描子目录，将子目录的内容一并复制到目标位置，但不会保持软链接、权限等其他属性详细信息。 总结来说，`-a` 更全面，除了递归还包含了更细致的元数据处理；而 `rsync -r` 只能保证目录结构的递归同步。如果你需要精确的元数据同步，应使用 `-a`；如果只需要目录结构，`-r` 就足够了。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值