MySQL自动备份脚本和ftp上传脚本

MySQL自动备份脚本,并上传ftp

在日常的工作中Mysql数据库备份是长期需要去做的一件运维工作,但是人工手动去做这一机械的动作确实必要性不高,所以写个脚本来跑是比较好的。

mysql备份脚本
#!/bin/bash
number=8
#(备份个数)
backup_dir=/home/mysqlbackup
#(备份路径)
date=`date +%Y-%m-%d-%H-%M-%S`
#(时间)
tool=mysqldump
#(备份工具)
username=root
password=123456

if [ ! -d $backup_dir ];

then 
  
mkdir -p $backup_dir;

fi
#/验证备份路径是否创建,无则创建
$tool -u$username -p$password -A > $backup_dir/mysqlbackup-$date.sql
#调用备份软件,进行全库备份,具体参数具体更改
if [ $? -eq 0 ];

then 

echo "create $backup_dir/mysql-$date.sql is success" >> $backup_dir/backup_log.txt

else

echo "backup  $backup_dir/mysql-$date.sql is fail" >> $backup_dir/backup_log.txt

fi
#判断备份是否成功,并写入日志
delfile=`ls -l -rt $backup_dir/*.sql | awk '{ print $9 }' | head -n 1`
#抓取备份目录里最老的sql文件
count=` ls -l -rt $backup_dir/*.sql | awk '{ print $9 }' | wc -l`
#统计sql文件个数
if [ $count -gt $number ];

then

rm -rf $delfile

echo "delete $delfile " >> $backup_dir/backup_log.txt

fi
#判断sql文件个数如果大于$number就执行删除命令


**ftp上传脚本**


#!/bin/bash

cd /home/mysqlbackup 
#提前进入上传目录
backup_dir=/home/mysqlbackup
backup_remote=/mysql
file=` ls -l -t  mysql*.sql | awk '{ print $9 }' | head -n 1 `
#取得最新的sql文件名
ftphost="10.200.1.223"
ftp_user="mysql"
ftp_pwd="Mysql@123"
dd=` date +%Y-%m-%d-%H-%M-%S`
#定义变量

cd /home/mysqlbackup
echo "$file"
ftp -i -n <<!
open $ftphost
user $ftp_user $ftp_pwd
bin
cd mysqlbackup
lcd $backup_dir
put $file
close
bye
!

echo "$file"
if [ $? -eq 0 ];

then 

echo "create date $dd  $backup_dir/$file upload ftp  is success" >> $backup_dir/ftpbackup_log.txt

else

echo "backup  date $dd $backup_dir/$file  upload ftp  is fail" >> $backup_dir/ftpbackup_log.txt

fi

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
可以使用Python编写一个脚本自动上传FTP目录的csv文件导入MySQL数据库。以下是主要步骤: 1. 首先,需要安装ftplib库和pymysql库来连接FTPMySQL数据库。 2. 连接FTP服务器,使用ftplib库下载csv文件到本地。 3. 使用pandas库读取csv文件,将数据转换为DataFrame格式。 4. 使用pymysql库连接MySQL数据库,并将DataFrame数据导入到MySQL数据库中。 5. 最后,删除FTP服务器上已经导入到MySQL数据库中的csv文件。 以下是一个Python脚本的示例代码: ```python import ftplib import os import pandas as pd import pymysql # FTP服务器信息 ftp_server = "ftp.example.com" ftp_username = "username" ftp_password = "password" ftp_remote_path = "/csv_files/" # MySQL数据库信息 mysql_host = "localhost" mysql_port = 3306 mysql_username = "root" mysql_password = "password" mysql_database = "database_name" mysql_table = "table_name" # 连接FTP服务器并下载文件 ftp = ftplib.FTP(ftp_server) ftp.login(ftp_username, ftp_password) ftp.cwd(ftp_remote_path) file_list = ftp.nlst() for file_name in file_list: if file_name.endswith(".csv"): local_file_path = os.path.join(os.getcwd(), file_name) with open(local_file_path, "wb") as local_file: ftp.retrbinary("RETR " + file_name, local_file.write) # 将csv文件导入到MySQL数据库中 df = pd.read_csv(local_file_path) conn = pymysql.connect(host=mysql_host, port=mysql_port, user=mysql_username, password=mysql_password, database=mysql_database) cursor = conn.cursor() for index, row in df.iterrows(): sql = f"INSERT INTO {mysql_table} (col1, col2, col3) VALUES ('{row['col1']}', '{row['col2']}', '{row['col3']}')" cursor.execute(sql) conn.commit() cursor.close() conn.close() # 删除FTP服务器上已经导入到MySQL数据库中的csv文件 ftp.delete(file_name) os.remove(local_file_path) ftp.quit() ``` 其中,需要根据实际情况修改FTP服务器信息、MySQL数据库信息和CSV文件的列名和数据类型。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值