将服务器的数据定时压缩并scp到跳板机

最新推荐文章于 2023-10-23 15:21:51 发布
最新推荐文章于 2023-10-23 15:21:51 发布
阅读量262 收藏
点赞数
分类专栏： shell 文章标签： linux python shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/baidu_41383636/article/details/115612516
版权
这篇博客介绍了如何使用shell脚本配合expect库，实现将服务器数据定时压缩并免密scp到跳板机。脚本分为压缩、传输和定时运行三个部分，涉及crontab定时任务和日志记录。最后，通过sendmail发送邮件通知。
摘要由CSDN通过智能技术生成

shell脚本将服务器的数据定时压缩并scp到跳板机（无需输入密码）

这已经是去年还是前年的工作了，一直写了整理文档没有发，今天有空发一下啦。
运维有个新需求，是要将一个服务器的数据，传到另一台服务器，但中间还需要登录跳板机。因为这样传过于麻烦，所以我们最终商量决定在跳板机上加一个10T的硬盘用于存储数据，这样就减少了第二步的传输。所以我开始看linux命令的书。由于我是大白菜，所以我用了很久才写出来55555
首先这个脚本分成三部分，1：压缩；2：传数据；3：自动定时运行脚本。数据一共有三部分，将自动生成在当天日期的文件夹下，但是capture_image下文件夹是2019-12-01类型，而facedetectionrangetest下文件夹是2019-12-1类型，所以需要去分开判断压缩。

压缩代码比较简单：

#!/bin/bash  
#取前一天年月日  
y=`date --date='1 days ago' "+%Y"`
m=`date --date='1 days ago' "+%m"`
d=`date --date='1 days ago' "+%d"`
#取前一天年月日去0
day=`expr $d + 0`
mon=`expr $m + 0`
echo "$y-$mon-$day"
filename1="$y-$m-$d.zip" ###命名方式1
filename2="$y-$mom-$day.zip
最低0.47元/天 解锁文章
阿尔卑斯吃烧烤
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
基于跳板机的 putty/winscp 配置方式
weixin_42272411的博客
12-20 1709
背景 对于服务器安全性要求比较高的企业，会给服务器的访问添加安全层，运维人员只能通过一个跳板机才能访问到真正的服务器，这里针对脚本操作和文件传输选择了两个开源软件进行说明。 连接信息 # 跳板机IP和SSH端口 10.200.222.222:60022 # 目标服务器IP和SSH端口 192.168.124.24:10022 Putty 配置 配置跳板机 配置跳板机的验证私钥（如果只有用户名和密码，那这一步可以跳过） 配置隧道信息（Source port 可以任意填一个本地没有被占用的端口，Dest
使用winscp 通过中转机器（跳板机、堡垒机）密钥远程连接服务器，保姆级别教程
最新发布
微风轻吟挽歌的博客
06-13 581
winscp 通过 中转机（跳板机、壁垒机）密钥、远程连接linux服务器，保姆级别教程
scp使用跳板机传输文件
热门推荐
工长山的专栏
04-25 1万+
scp命令基于ssh传输文件，那么我们就可以通过如下方式跨机器传输 编辑~/.bashrc文件，加入，注意最后一行中需要替换xx字样为你的跳板机ip rscp(){ ip="" for arg in $* do tmp=`echo "$arg" | grep -E -o "[0-9]+\.[0-9]+\.[0-9]+\.[0-9]+"` if [ ${#tmp} -gt 1 ] ...
scp通过跳板机传输文件
ab0902cd的博客
02-11 4009
ssh 通过代理机跳转内网 proxyjump代理登录跳板机 使用proxyjump时，可能会遇到连接中转服务器后报错： channel 0: open failed: administratively prohibited: open failed stdio forwarding failed kex_exchange_identification: Connection closed by remote host 这是因为没有指定端口号，需要指定端口号 还有可能遇到下面的问题： ssh: Co
使用scp上传文件到服务器或从服务器下载文件(支持跨越跳板机)
RandyLambert的博客
08-31 3042
转载 原文链接 原贴写的很好，我转载懒得排版了 scp是什么？ 使用man scp可以看到scp的解释『scp — secure copy (remote file copy program)』，scp是一个安全拷贝工具，支持远程拷贝，它支持本地拷贝到本地(当然这个一般不会用它，直接用cp就行)、本地拷贝到远程(上传)、远程拷贝到本地(下载)、远程拷贝到远程。 scp是使用ssh通道来传输的，所以，linux服务器都是自带scp的，scp传输文件要输入密码的问题，可以通过设置ssh免密码登录即可解决。 实
scp跳板机
weixin_30644369的博客
01-12 931
－－－登陆跳板机 #ssh -i ./test.pub user@10.0.0.44 -p4333 -v －－－把跳板机的文件拷贝下来 #scp -P 4333 -i ./vv/test.pub user@10.0.0.44:~/test.html . －－－把跳板机文件拷贝到服务器 #scp -r -i .ssh/id_rsa $1 deploy@10.0.0.40:~/ 转载于:ht...
linux通过跳板机连接远程服务器并进行文件传输的方法
09-14
以下将详细介绍如何使用Linux通过跳板机连接远程服务器并进行文件传输。 首先，我们需要确保已经安装了SSH（Secure Shell）客户端工具，如OpenSSH。在大多数Linux发行版中，SSH客户端通常预装。如果未安装，可以...
scp 将数据从一台linux服务器复制到另一台linux服务器
09-15
### scp 命令详解：实现 Linux 服务器之间的数据安全复制 #### 一、scp 命令简介 scp（Secure Copy）是一个基于 SSH 协议的安全文件传输工具，主要用于在 Linux 或 Unix 系统之间进行文件或目录的远程复制。与传统...
linux使用scp实现服务器A向服务器B传输文件
09-15
例如，`scp codinglog@192.168.0.101:/home/kimi/test.txt /tmp/local_destination`，这条命令的作用是将192.168.0.101服务器上的`/home/kimi/test.txt`文件下载到本地的`/tmp/local_destination`目录。 - **上传...
python执行scp命令拷贝文件及文件夹到远程主机的目录方法
09-19
SCP（Secure Copy）是基于SSH协议的安全文件传输工具，它允许用户通过加密连接将文件从本地复制到远程主机或者反之。 在给定的例子中，我们看到一个Python脚本`3s.py`，它使用了`subprocess`模块来调用操作系统级别...
scp通过跳板机在两台服务器之间传输文件
JM的博客
07-22 257
【代码】scp通过跳板机在两台服务器之间传输文件。
从服务器取得文件到跳板机
m0_64202754的博客
11-13 831
从服务器的取得/log/spring.log 下载到本地 /root/temp下 scp root@服务器名或IP:/log/spring.log /root/temp/ 例如: scp root@172.28.122.11:/log/spring.log /root/temp 将跳板机文件上传到服务器 例如：scp /root/temp/spring.log root@172.28.122.11:/root/temp ...
SCP压缩传输
09-20 1858
[size=medium] SCP -C 传输 详见： [url]http://hi.baidu.com/wjb711/item/a83c02e224e0a2b52f140b2b[/url] [/size]
linux ssh scp 使用跳板机 访问 远程服务器
whatday的专栏
05-06 1万+
处于防火墙内部的主机往往需要通过跳板机才能访问互联网上的远程服务器。如下图所示: +--------------------+ +---------------------+ +------------------+ | | | | | | |...
scp通过跳板机向服务器传文件的方法
Wang laiqi's blog
10-23 2168
在实际情况下如果目标服务器无法通过ssh直接连接，需要跳板机才能连接，如何使用scp呢？目标服务器host2: 192.168.42.9 user:admin2。跳板机host1:192.168.32.7 user:admin1。通过如下命令用scp命令进行传输。
winscp实现跳板机连接
Code-Create-World
03-20 5045
http://blog.csdn.net/xuejinliang/article/details/52585027
文件夹备份压缩并传输到其他服务器,winserver定时压缩备份文件夹(示例代码)
weixin_42303112的博客
08-05 483
简介这篇文章主要介绍了winserver定时压缩备份文件夹(示例代码)以及相关的经验技巧，文章约1119字，浏览量187，点赞数3，值得参考！#! /usr/bin/python# version 1.1import sysimport osimport timeimport datetime# 要备份的文件夹目录fileFolder = r'D:BPM'# 要输出的文件名称(默认压缩在脚本执行的...
Linux定时压缩打包日志文件,并移动到指定的FTP服务器上
sinat_34974437的博客
12-03 1119
1、通过shell脚本实现将7天前的生成的日志压缩为zip包，并将原日志删除，最后将压缩包备份到FTP服务器上。具体见下 #!/bin/sh#Copyright(c) 2019-2019 　 #Backup the detail files and upload, clear logs #Version 0.1.1 #应用名服务 APPNAME=Applcation #应用1业务日志路径 B...
要备份 MySQL 数据并将备份文件上传到远程服务器
07-15
要备份 MySQL 数据并将备份文件上传到远程服务器，你可以使用 Shell 脚本结合 mysqldump 和 scp 命令来实现。以下是一个示例脚本： ```bash #!/bin/bash # MySQL设置 db_user="your_username" db_password="your_password" db_name="your_database_name" # 备份配置 backup_directory="/path/to/backup/directory" backup_filename="backup_$(date +%Y%m%d%H%M%S).sql" remote_user="remote_user" remote_host="remote_host" remote_directory="/path/to/remote/directory" # 创建备份目录 mkdir -p $backup_directory # 使用mysqldump备份MySQL数据库 mysqldump -u $db_user -p$db_password $db_name > $backup_directory/$backup_filename # 将备份文件上传到远程服务器 scp $backup_directory/$backup_filename $remote_user@$remote_host:$remote_directory # 清理本地备份文件 rm $backup_directory/$backup_filename ``` 在上面的脚本中，你需要根据实际情况配置以下变量： - `your_username`：MySQL 用户名 - `your_password`：MySQL 密码 - `your_database_name`：要备份的数据库名称 - `/path/to/backup/directory`：本地备份文件存储目录 - `remote_user`：远程服务器用户名 - `remote_host`：远程服务器主机名或 IP 地址 - `/path/to/remote/directory`：远程服务器存储备份文件的目录 脚本首先创建一个用于存储备份文件的目录，然后使用 `mysqldump` 命令将 MySQL 数据库备份到指定的文件中。接下来，使用 `scp` 命令将备份文件上传到远程服务器。最后，脚本清理本地备份文件。 你可以将以上脚本保存为一个文件（例如 `backup_mysql.sh`），然后使用 `chmod +x backup_mysql.sh` 命令赋予脚本执行权限。运行脚本时，它将备份 MySQL 数据并将备份文件上传到远程服务器上指定的目录。 请确保在使用脚本之前进行测试，并注意脚本执行的权限和安全性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值