rsync备份服务部署

于 2024-05-17 00:38:35 发布
阅读量741 收藏 22
点赞数 8
文章标签： 运维 linux 面试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2301_77118221/article/details/138980445
版权

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前在阿里

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新Linux运维全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img
img
img
img

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上运维知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

需要这份系统化的资料的朋友，可以点击这里获取！

在这里插入图片描述增量传输：首先会使用算法进行对比，发现远程主机已有10GB的内容后，只会传输额外增加的5G数据，高效！

二、1v4 (rsync一个抵四个)

1. 本地备份数据：rsync抵cp
	[root@backup ~]# cp /etc/hosts /tmp/
	[root@backup ~]# rsync /etc/hosts /tmp/
2. 远程备份数据：rsync抵scp
scp命令

在这里插入图片描述

-r表示递归备份
-p表示保持文件属性不变，防止源文件传输到远程主机后，文件的属性发生变化
将本主机的/etc/hosts文件远程备份到备份服务器（172.16.1.41）的/backup目录下；
远程备份时默认以当前登录的用户角色传输，若当前为普通用户，想以root角色远程传输，可使用如下命令：scp -rp /etc/hosts root@172.16.1.41:/backup

rsync命令

（1）当备份的路径后没有添加“/”，备份的是整个目录；

	[root@nfs01 ~]# rsync -rp /oldboy 172.16.1.41:/backup
	root@172.16.1.41's password:

	[root@backup backup]# ll
	total 0
	drwxr-xr-x 2 root root 48 Aug 10 21:46 oldboy

（2）当备份的路径后有“/”，备份的是此目录路径下的文件；

	[root@nfs01 ~]# rsync -rp /oldboy/ 172.16.1.41:/backup
	root@172.16.1.41's password:
	
	[root@backup backup]# ll
	total 0
	-rw-r--r-- 1 root root 0 Aug 10 21:48 01.txt
	-rw-r--r-- 1 root root 0 Aug 10 21:48 02.txt
	-rw-r--r-- 1 root root 0 Aug 10 21:48 03.txt
3. 删除命令：rsync抵rm
	[root@nfs01 ~]# mkdir /null --创建一个空目录
	[root@nfs01 ~]# rsync -rp --delete /null/ 172.16.1.41:/backup

	[root@backup backup]# ll
	total 0

–delete参数实现了无差异同步备份，就是备份服务器/backup目录中的数据保持和/null中的数据一致，只不过此处/null目录正好是空的，投机取巧实现了删除功能！
【面试题】有一个存储数据信息的目录, 目录中数据存储了50G数据, 如何将目录中的数据快速删除？

4. 查看文件属性命令：rsync抵ls/ll
	[root@nfs01 ~]# ls /etc/hosts
	/etc/hosts
	[root@nfs01 ~]# rsync /etc/hosts
	-rw-r--r--         372 2020/08/09 20:48:59 hosts

三、rsync语法：

   SYNOPSIS
   Local:  rsync [OPTION...] SRC... [DEST]
   本地备份数据: 
   src: 要备份的数据信息
   dest: 备份到什么路径中

   Access via remote shell:
   Pull: rsync [OPTION...] [USER@]HOST:SRC... [DEST]
	远程备份数据:
   [USER@]    --- 以什么用户身份拉取数据(默认以当前用户)
   hosts      --- 指定远程主机IP地址或者主机名称
   SRC        --- 要拉取的数据信息
   dest       --- 保存到本地的路径信息
   
   Push: rsync [OPTION...] SRC... [USER@]HOST:DEST
   SRC        --- 本地要进行远程传输备份的数据
   [USER@]    --- 以什么用户身份推送数据(默认以当前用户)
   hosts      --- 指定远程主机IP地址或者主机名称
   dest       --- 保存到远程的路径信息
pull和push的理解

在这里插入图片描述

四、rsync守护进程：

以守护进程方式备份数据的好处：
  1. 可以进行一些配置管理
  2. 可以进行安全策略管理
  3. 可以实现自动传输备份数据
服务部署流程：
  1. 下载安装软件
  2. 编写配置文件
  3. 搭建服务环境 备份的目录/目录权限
  4. 启动服务程序 开机自动启动
  5. 测试服务功能

rsync服务端部署：

1. 安装软件

	rpm -qa rsync  --查看是否已经安装
	yum install -y rsync

2. 详解配置文件/etc/rsyncd.conf

##created by Loto at 2020/8/12 
###rsyncd.conf start## --注释信息

uid = rsync       						--指定管理备份目录的用户
gid = rsync       						--指定管理备份目录的用户组
port = 873        						--定义rsync备份服务的网络端口号
fake super = yes  						--将rsync虚拟用户伪装为超级管理员
use chroot = no   						--和按权相关的配置
max connections = 200  				--最大连接数，同时只能有200个客户端连接到备份服务器
timeout = 300          				--超时时间（s）防止占着茅坑不拉屎
pid file = /var/run/rsyncd.pid   		--记录进程号码信息
lock file = /var/run/rsync.lock  	--锁文件，当连接数超过200，服务上锁
log file = /var/log/rsyncd.log   		--日志文件路径
ignore errors                   		--忽略传输中的简单错误
read only = false               		--指定备份目录可读可写
list = false                    		
hosts allow = 172.16.1.0/24    		--白名单
hosts deny = 0.0.0.0/32        		--黑名单
auth users = rsync_backup      		--认证用户名
secrets file = /etc/rsync.password 	--指定认证用户密码文件 用户名称:密码信息

[backup] 								--模块信息
comment = "backup dir by oldboy"  
path = /backup                   		--指定备份目录

还可以增加别的模块,如:
[backup07]
path=/back/07；当客户端上传指明模块名后，会自动备份到/back/07目录中

3. 创建rsync服务的虚拟用户

	useradd -s -M /sbin/nologin rsync

4. 创建备份服务认证密码文件

	echo “rsync_backup:oldboy123” > /etc/rsync.password


[rsync_backup是登录认证的账户名，oldboy123是登录认证的密码，
客户端通过这个标识登录远程服务器实现备份，即认证口令]

查看/etc/rsync.password文件的属性：
在这里插入图片描述由于是密码文件，对于保密性有要求，所以需要将文件的权限修改为600；
在这里插入图片描述

5. 创建备份目录并修改属主属组信息
在这里插入图片描述

6. 启动并自启服务

	systemctl start rsyncd
	systemctl enable rsyncd
	systemctl status rsyncd

rsync客户端部署：

上传语法：
	rsync [OPTION...] SRC... [USER@]HOST::DEST
		-- SRC=要推送备份数据信息
		-- [USER@]: 指定认证用户信息
		-- HOST: 指定远程主机的IP地址或者主机名称
		-- ::DEST: 备份服务器的模块信息

在这里插入图片描述

免交互上传

存在实际情况：当有需求每天0点指令命令实现备份，可以写入计划任务来实现，但是存在一个问题——需要输入密码！解决方法如下：

  1. 在客户端创建一个密码文件，并将密码文件的权限改为600

最后的话

最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！

资料预览

给大家整理的视频资料：

给大家整理的电子书资料：

如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

给大家整理的电子书资料：

[外链图片转存中…(img-BpoCfYSR-1715877494156)]

如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

夹谷景曜
关注
  • 8
    点赞
  • 踩
  • 22
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Prometheus 查询语言 PromQL 的 CPU 使用率计算方法_prometheus查询内存使用率一周平均值
2401_83974064的博客
04-18 1280
【代码】Prometheus 查询语言 PromQL 的 CPU 使用率计算方法_prometheus查询内存使用率一周平均值。
Prometheus Operator部署
weixin_46837396的博客
03-28 705
文章目录一、Prometheus Operator的部署1、安装配置2、介绍1）Prometheus2）Alertmanager3）ThanosRuler4）ServiceMonitor5）PodMonitor6）Probe7）PrometheusRule8）AlertmanagerConfig3、安装4、配置二、自定义监控报警etcd 监控配置 PrometheusRule配置报警三、高级配置自动发现配置数据持久化 一、Prometheus Operator的部署 1、安装配置 前面的章节中我们学习了用自
【prometheus】计算CPU使用率
白开水的博客
07-19 2万+
prometheus版本 版本信息： 2.19 prometheus版本不一样，语法会有些区别，注意查看官方文档： https://prometheus.io/docs/prometheus/latest/getting_started/ prometheus常用函数 prometheus常用函数 CPU使用率公式 我们知道 CPU的使用率 = (所有非空闲状态CPU使用时间总和 )/(所有状态CPU时间总和) 由下列公式： CPU使用时间总和 = 所有非空闲状态CPU使用时间总和 + 所有空闲状
prometheus查看cpu的使用率
qq_41122834的博客
02-26 8628
公式： (1-(sum(increase(node_cpu_seconds_total{mode="idle"}[1m]))by(instance))/(sum(increase(node_cpu_seconds_total[1m]))by(instance)))*100 (sum(increase(node_cpu_seconds_total{mode=“idle”}[1m]))by(inst...
Prometheus 查询语言 PromQL 的 CPU 使用率计算方法
qq_35753140的博客
03-26 2万+
CPU 使用率的计算方法 翻了几篇 Prometheus 的 PromQL 查询 cpu 使用率的文章，说得都不是特别透，结合一篇英文文章终于搞明白了怎么计算这个指标。 cpu 模式 一颗 cpu 要通过分时复用的方式运行于不同的模式中，可以类比为让不同的人使用 cpu，张三使一会儿，李四使一会儿。这些模式可以用 top 命令查看，包括： us：用户进程使用cpu的时间 sy：内核进程使用cpu...
Prometheus node_exporter计算CPU利用率的标准公式应该是哪一个
洒满阳光的午后的博客
12-26 1417
在实际使用中我们会发现，当节点的CPU实际利用率较低时，使用第一种公式计算出的CPU利用率与实际相差较大，这是因为该公式存在逻辑上的错误。第一种（rate和irate均可，一个反映区间值，一个反映瞬时值，新版本指标名为。使用irate/rate计算CPU利用率是不准确的，且CPU利用率越低计算结果越不准确。由此可见，只有在CPU利用率较高时，CPU各状态之和才近似等于节点运行时间。显示节点与单核CPU利用率约在75-85%左右，此时计算。显示节点与单核CPU利用率约在92-93%左右，此时计算。
rsync服务器和客户端安装部署
08-05
rsync是一种广泛使用的开源同步和备份工具，它在Linux和Unix系统中尤为常见。rsync以其高效、快速的文件同步特性而闻名，可以用于本地文件的备份或远程系统的数据迁移。下面将详细介绍rsync的安装、配置以及使用方法...
ansible实现一键部署rsync服务，并将同步结果钉钉消息发送
07-08
5) 主控端即备份服务器使用rsync用户增加同步、日志记录、钉钉发送消息等定时任务； 6) 定时任务里各个需要同步的源地址及项目名称，请自行修改； 7) 日志为叠加记录，钉钉消息发完后，会按日期进行备份，同时删除原...
rsync守护进程模式部署
01-09
接着，创建rsync备份目录，并为rsync用户分配权限： ```bash mkdir -p /data useradd rsync -s /sbin/nologin -M chown -R rsync.rsync /data/ ``` 创建认证用户密码文件并设置权限： ```bash echo "rsync_backup:...
prometheus常用表达式
weixin_44946147的博客
03-23 4561
prometheus常用表达式 ##1. 系统使用率相关 1.1 内存使用率： 内存的使用率 = (所有非空闲状态CPU使用时间总和 )/(所有状态CPU时间总和) (1 - (node_memory_MemAvailable_bytes{job=~"prometheus"} / (node_memory_MemTotal_bytes{job=~"prometheus"})))* 100 1.2 cpu使用率 (1 - avg(irate(node_cpu_seconds_total{job=~"p
prometheus-operator使用【prometheus配置说明】
Happywzy~的博客
11-29 2025
全局配置 参考官网：https://prometheus.io/docs/prometheus/latest/configuration/configuration/#kubernetes_sd_config global: # How frequently to scrape targets by default. [ scrape_interval: <duration&...
Prometheus SQL统计容器cpu、内存使用率
lc2288的博客
12-08 6392
通过prometheus SQL统计容器cpu、内存使用率，指导容器requests、limits值的设置，提高资源利用率，降低云上资源成本
Prometheus Operator使用指南笔记
Sindweller5530的博客
08-19 1041
本篇博文主要是翻译User Guide of Prometheus Operator并记录笔记 从 v0.39.0 开始，Prometheus Operator 需要使用 Kubernetes v1.16.x 及更高版本。 概念简介 Operator 是一种可以操作其他软件的软件，就是将人所收集的操作经验转化为软件。 Prometheus Operator旨在尽可能简单地在Kubernetes上运行Prometheus，同时保持K8s原生配置选项。 manifest举例 先决条件：一个可以访问的k8s
Prometheus Operator 极简配置方式在k8s一条龙安装Prometheus 监控
热门推荐
LoveSummer
11-23 3万+
提供Kubernetes原生部署和管理Prometheus和相关的监控组件。该项目的是简化和自动化配置Prometheus的监控Kubernetes集群。Kubernetes自定义资源:使用Kubernetes自定义资源来部署和管理Prometheus、Alertmanager和相关组件。简化的部署配置:从本地Kubernetes资源配置Prometheus的基本功能，如版本、持久性、保留策略和副本。
prometheus使用 (番外篇) prometheus-operator部署
默子昂
02-18 1794
我们上一章其实监控还缺少很多东西，我们可以通过部署已经写好整合包 作为案例来编写适合自己环境的监控指标收集，我找到了两个版本在这里演示下 方法1 通过yaml文件进行部署 #项目地址 https://github.com/coreos/kube-prometheus 先将之前我们部署的停掉 kubectl delete -f . 1、拉取软件包 wget https://gitee.com/hackerwjz/kube-prometheus/repository/archive/ma.
Prometheus-Operator：快速部署
最新发布
m0_60125201的博客
05-11 1297
本博客讲解了Prometheus的简介，以及如何通过Prometheues Opeartor方式进行快速部署Prometheues以及Grafana模版使用等内容。
Prometheus Operator部署和使用_prometheus podmonitor
Python毕设源码程序王哥
04-12 927
我们以Nginx Ingress为例,使用Prometheus Operator来监控Nginx Ingress。我们先通过Helm部署，选择nginx/nginx-ingress。先渲染模板来分析一下，为了集群外访问，“type: LoadBalancer"应该改为"type: NodePort”，并将nodePort配置为固定端口。Pod公开了prometheus端口"containerPort: 9113"，我们下面先使用PodMonitor进行监控。
PromQL学习 计算集群cpu平均使用率
m0_49180521的博客
07-07 1865
计算集群cpu平均使用率 通过计算cpu空闲使用率 用1-空闲率 则为cpu使用率 node_cpu_seconds 表示机器在非重启情况下开机到现在所使用的时间（s） 由于cpu资源会不断的被机器利用，其中对应了很多模式，包括内核进程、用户进程、io等待、中断等使用模式 可以通过查询node_cpu_seconds 指标来看各种对应的模式 cpu空闲对应的模式：model=“idle”：空闲的cpu时间 查询cpu空闲使用率： 使用irate计算时间窗口 [5m] 内 cpu空闲
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值