Python脚本上传本地文件到百度云

保留多少份最新备份

KEEP_DAYS = 30

用来取得文件名中的日期部分的正则表达式(用于保留指定份数的最新文件)

Db_mlc_20210502_150501.sql.gz

Web_mango.natappvip.cc_20210502_150002.tar.gz

DATE_REGX = r’.(\d{8})_\d{6}.

百度云远程目录

BDY_ROOT = ‘/raspiBackup/wwwBackup/’

BDY_PATH_SITE = BDY_ROOT + ‘site/’

BDY_PATH_DATABASE = BDY_ROOT + ‘database/’

其他备份文件,一般是程序文件本身和日志文件,本地文件和远程路径成对设置即可

other_backup_list = []

other_backup_list.append([currentPath + “backupBaota.py”, BDY_ROOT + ‘tool/backupBaota.py’])

other_backup_list.append([currentPath + ‘myLib/Backup2BDY.py’, BDY_ROOT + ‘tool/myLib/Backup2BDY.py’])

other_backup_list.append([currentPath + ‘myLib/MySmsLib.py’, BDY_ROOT + ‘tool/myLib/MySmsLib.py’])

other_backup_list.append([LOG_FILE, BDY_ROOT + ‘backupBaota.log’])

配置完成,以下基本不用修改

hostName = socket.gethostname()

execUser = getpass.getuser()

try:

timeStart = time.time()

logging.info(“备份开始-----------------------------------------------------”)

logging.info(“运行环境: Hostname [%s] User [%s]”, hostName, execUser)

发送提醒短信用工具类(不需要可注释掉)

sms = MySmsLib.MySms()

bdy = Backup2BDY.Backup2BDY()

logging.info(“开始备份database…”)

宝塔备份文件夹使用的是默认设置如果有变化需要修改

bdy.backupFolder(localPath=‘/www/backup/database/’, remotePath=BDY_PATH_DATABASE, \

keepDays=KEEP_DAYS, dateRegx=DATE_REGX)

logging.info(“开始备份site…”)

bdy.backupFolder(localPath=‘/www/backup/site/’, remotePath=BDY_PATH_SITE, \

keepDays=KEEP_DAYS, dateRegx=DATE_REGX)

logging.info(“最后备份其他文件(覆盖)…”)

for row in other_backup_list:

bdy.backupFile(row[0], row[1])

logging.info(“备份成功,发送提醒短信…”)

timeEnd = time.time()

ret = sms.send947195(hostName, “[备份宝塔站点]”, “成功”, “%d秒”%(timeEnd-timeStart), “无”)

logging.info(“提醒短信发送完毕。”)

logging.info(“备份完成,程序终止。”)

except Exception as err:

logging.error(“出现未知错误\n{0}”.format(err))

logging.info(“发送提醒短信…”)

timeEnd = time.time()

ret = sms.send947195(hostName, “[备份宝塔站点]”, “失败。”, “%d秒”%(timeEnd-timeStart), “无”)

logging.info(“提醒短信发送完毕,程序终止。”)

包装类

文件名:Backup2BDY.py

文件位置:/home/XXX/mytools/myLib/ (主程序所在文件夹下的 myLib 子文件夹)

import os

import logging

import re

import shutil

from bypy import ByPy

class Backup2BDY:

日志输出配置

LOG_FILE = “./Up2BDY.log”

LOG_FORMAT = “%(asctime)s - %(levelname)s - %(message)s”

DATE_FORMAT = “%Y/%m/%d %H:%M:%S”

logging.basicConfig(filename=LOG_FILE, level=logging.INFO, format=LOG_FORMAT, datefmt=DATE_FORMAT)

获取远程目录下的文件名列表

def __getRemoteFileList(self, remotePath):

通过os.popen来执行bypy以获取标准输出内容(os.popen返回的其实是一个文件对象)

fileNameList = []

isIntroLine = True

retFile = os.popen(“python3 -m bypy list " + remotePath + " ‘$f’”)

for row in retFile:

if (not isIntroLine):

已跳过介绍部分文本,开始接收文件名

fileNameList.append(row.replace(‘\n’, ‘’))

跳过输出结果开头的部分(MD5码不对之类的消息)

直到输出/app/bypy/…才是真正需要的数据

if (row.startswith(“/app”)):

isIntroLine = False

retFile.close()

return fileNameList

取得文件列表中的所有日期一览,倒序排列

def __getDateListByFileNameList(self, fileNameList, dateRegx ):

获取所有文件名中的日期,宝塔的站点和数据库备份文件名中会包含yyyymmdd_hhmmss

dateList = []

for fileName in fileNameList:

matchObj = re.match( dateRegx, fileName)

date = matchObj.group(1)

if (date not in dateList):

dateList.append(date)

倒序排列

dateList.sort(reverse=True)

return dateList

备份文件夹

def backupFolder(self, localPath, remotePath, keepDays, dateRegx=r’.(\d{8})_\d{6}.'):

logging.info(“test:localPath:%s, remotePath:%s, keepDays:%s, dateRegx:%s”, localPath, remotePath, keepDays, dateRegx)

return

定义百度云模块

bp=ByPy()

logging.info(“本地文件夹:%s”, localPath)

logging.info(“检查云盘中有无过期备份,只保留最新%d天(份)备份。”, keepDays)

logging.info(“取得云盘文件夹「%s」中的文件列表…”, remotePath)

fileNameList = self.__getRemoteFileList(remotePath)

取得文件列表中的所有日期一览,倒序排列

dateList = self.__getDateListByFileNameList(fileNameList, dateRegx)

logging.info(“当前云盘上存在的备份日期列表”)

for date in dateList:

logging.info(“%s”, date)

根据定义的保留备份天数计算过期日期

比如存在如下日期的文件

20210415

20210412

20210407

20210329

20210203

当备份天数=2,过期日期=20210407

当备份天数=3,过期日期=20210329

当备份天数>=5,没有过期文件

if (keepDays < len(dateList)):

outdate = dateList[keepDays]

logging.info(“存在过期备份,早于或等于日期「%s」的备份将被删除。”, outdate)

再次循环一次所有文件,并进行删除

for fileName in fileNameList:

matchObj = re.match( dateRegx, fileName)

date = matchObj.group(1)

删除过期备份

if (date <= outdate):

删除文件不需要获取标准输出的内容,所以这里直接调用模块而不是os.popen

retCode = bp.delete(remotePath + fileName)

if (retCode == 0):

logging.info(“过期备份「%s」删除成功。”, remotePath + fileName)

else:

logging.warn(“过期备份「%s」删除失败。”, remotePath + fileName)

else:

logging.info(“目前不存在过期备份。”)

上传本地文件夹,已存在的话覆盖

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Python工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Python开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
img
img



既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Python开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新

如果你觉得这些内容对你有帮助,可以添加V获取:vip1024c (备注Python)
img

最后

不知道你们用的什么环境,我一般都是用的Python3.6环境和pycharm解释器,没有软件,或者没有资料,没人解答问题,都可以免费领取(包括今天的代码),过几天我还会做个视频教程出来,有需要也可以领取~

给大家准备的学习资料包括但不限于:

Python 环境、pycharm编辑器/永久激活/翻译插件

python 零基础视频教程

Python 界面开发实战教程

Python 爬虫实战教程

Python 数据分析实战教程

python 游戏开发实战教程

Python 电子书100本

Python 学习路线规划

一个人可以走的很快,但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
img

ython 学习路线规划

一个人可以走的很快,但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
[外链图片转存中…(img-LKRgbJ6y-1712859505956)]

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值