week7 day4 数据备份，pymysql模块

最新推荐文章于 2024-08-07 23:56:32 发布
最新推荐文章于 2024-08-07 23:56:32 发布
阅读量131 收藏
点赞数
分类专栏： 数据库及SQL语句 文章标签： mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_53587094/article/details/114240857
版权

week7 day4 数据备份，pymysql模块

一、IDE工具介绍

生产环境还是推荐使用mysql命令行，但为了方便我们测试，可以使用IDE工具
下载链接

掌握：
#1. 测试+链接数据库
#2. 新建库
#3. 新建表，新增字段+类型+约束
#4. 设计表：外键
#5. 新建查询
#6. 备份库/表

#注意：
批量加注释：ctrl+？键
批量去注释：ctrl+shift+？键

# 常规
新建查询: CTRL+Q
    
# Navicat 主窗口
命令列界面: F6

# ER 图表视图
刷新: F5
放大: CTRL+= 或 CTRL+滑鼠滚轮向上
缩小: CTRL+- 或 CTRL+滑鼠滚轮向下

# 表或集合设计器
查找字段: CTRL+F

# 数据查看器
查询对象（表、集合、视图、实体化视图）: CTRL+Q
    
# 查询设计器
运行或运行已选择的: CTRL+R
    
# 查询编辑器
注释或取消注释行: CTRL+/

二、MySQL数据备份（了解）

  1. 物理备份：直接复制数据库文件，适用于大型数据库环境。但不能恢复到异构系统中如windows
  2. 逻辑备份：备份的是建表、建库、插入等操作所执行的SQL语句，适用于中小型数据库，效率相对较低
  3. 导出表：将表导入到文本文件中

2.1 使用mysqldump实现逻辑备份

#语法：
# mysqldump -h 服务器 -u用户名 -p密码 数据库名 > 备份文件.sql

#示例：
#单库备份
mysqldump -uroot -p123 db1 > db1.sql
mysqldump -uroot -p123 db1 table1 table2 > db1-table1-table2.sql

#多库备份
mysqldump -uroot -p123 --databases db1 db2 mysql db3 > db1_db2_mysql_db3.sql

#备份所有库
mysqldump -uroot -p123 --all-databases > all.sql

2.2 恢复逻辑备份

#方法一：
[root@username backup]# mysql -uroot -p123 < /backup/all.sql

#方法二：
mysql> use db1;
mysql> SET SQL_LOG_BIN=0;
mysql> source /root/db1.sql

#注：如果备份/恢复单个库时，可以修改sql文件
DROP database if exists school;
create database school;
use school;

2.3 备份/恢复案例

#数据库备份/恢复实验一：数据库损坏
备份：
1. # mysqldump -uroot -p123 --all-databases > /backup/`date +%F`_all.sql
2. # mysql -uroot -p123 -e 'flush logs' //截断并产生新的binlog
3. 插入数据 //模拟服务器正常运行
4. mysql> set sql_log_bin=0; //模拟服务器损坏
mysql> drop database db;

恢复：
1. # mysqlbinlog 最后一个binlog > /backup/last_bin.log
2. mysql> set sql_log_bin=0; 
mysql> source /backup/2014-02-13_all.sql //恢复最近一次完全备份 
mysql> source /backup/last_bin.log //恢复最后个binlog文件


#数据库备份/恢复实验二：如果有误删除
备份：
1. mysqldump -uroot -p123 --all-databases > /backup/`date +%F`_all.sql
2. mysql -uroot -p123 -e 'flush logs' //截断并产生新的binlog
3. 插入数据 //模拟服务器正常运行
4. drop table db1.t1 //模拟误删除
5. 插入数据 //模拟服务器正常运行

恢复：
1. # mysqlbinlog 最后一个binlog --stop-position=260 > /tmp/1.sql 
# mysqlbinlog 最后一个binlog --start-position=900 > /tmp/2.sql 
2. mysql> set sql_log_bin=0; 
mysql> source /backup/2014-02-13_all.sql //恢复最近一次完全备份
mysql> source /tmp/1.log //恢复最后个binlog文件
mysql> source /tmp/2.log //恢复最后个binlog文件

注意事项：
1. 完全恢复到一个干净的环境（例如新的数据库或删除原有的数据库）
2. 恢复期间所有SQL语句不应该记录到binlog中

2.4 实现自动化备份

备份计划：
1. 什么时间 2:00
2. 对哪些数据库备份
3. 备份文件放的位置

备份脚本：
[root@username ~]# vim /mysql_back.sql
#!/bin/bash
back_dir=/backup
back_file=`date +%F`_all.sql
user=root
pass=123

if [ ! -d /backup ];then
mkdir -p /backup
fi

# 备份并截断日志
mysqldump -u${user} -p${pass} --events --all-databases > ${back_dir}/${back_file}
mysql -u${user} -p${pass} -e 'flush logs'

# 只保留最近一周的备份
cd $back_dir
find . -mtime +7 -exec rm -rf {} \;

手动测试：
[root@username ~]# chmod a+x /mysql_back.sql 
[root@username ~]# chattr +i /mysql_back.sql
[root@username ~]# /mysql_back.sql

配置cron：
[root@username ~]# crontab -l
2 * * * /mysql_back.sql

2.5 表的导出和导入

SELECT... INTO OUTFILE 导出文本文件
示例：
mysql> SELECT * FROM school.student1
INTO OUTFILE 'student1.txt'
FIELDS TERMINATED BY ',' //定义字段分隔符
OPTIONALLY ENCLOSED BY '”' //定义字符串使用什么符号括起来
LINES TERMINATED BY '\n' ; //定义换行符


mysql 命令导出文本文件
示例:
# mysql -u root -p123 -e 'select * from student1.school' > /tmp/student1.txt
# mysql -u root -p123 --xml -e 'select * from student1.school' > /tmp/student1.xml
# mysql -u root -p123 --html -e 'select * from student1.school' > /tmp/student1.html

LOAD DATA INFILE 导入文本文件
mysql> DELETE FROM student1;
mysql> LOAD DATA INFILE '/tmp/student1.txt'
INTO TABLE school.student1
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '”'
LINES TERMINATED BY '\n';

#可能会报错
mysql> select * from db1.emp into outfile 'C:\\db1.emp.txt' fields terminated by ',' lines terminated by '\r\n';
ERROR 1238 (HY000): Variable 'secure_file_priv' is a read only variable


#数据库最关键的是数据，一旦数据库权限泄露，那么通过上述语句就可以轻松将数据导出到文件中然后下载拿走，因而mysql对此作了限制，只能将文件导出到指定目录
在配置文件中
[mysqld]
secure_file_priv='C:\\' #只能将数据导出到C:\\下

重启mysql
重新执行上述语句

2.6 数据库迁移

务必保证在相同版本之间迁移
# mysqldump -h 源IP -uroot -p123 --databases db1 | mysql -h 目标IP -uroot -p456

三、pymysql模块

#安装
pip3 install pymysql

3.1 链接、执行sql、关闭（游标）

在这里插入图片描述

import pymysql
user=input('用户名: ').strip()
pwd=input('密码: ').strip()

#链接
conn = pymysql.connect(
	host='localhost',  # 如果是连接本机的数据库使用'127.0.0.1'
	port='3306',  # mysql的端口号是3306
	user='root',  # 登录的用户名
	password='123',  # 登陆的密码
	database='egon',  # 使用的数据库
	charset='utf8')  # 使用数据库的字符编码格式
	
# 通过链接对象conn产生了一个游标对象，游标对象就是来帮助执行SQL语句的，类似于SQL中的'mysql>'
cursor = conn.cursor()  # 执行完毕返回的结果集默认以元组显示
#cursor=conn.cursor(cursor=pymysql.cursors.DictCursor)

#执行sql语句
sql='select * from userinfo where name="%s" and password="%s"' %(user,pwd) #注意%s需要加引号
print(sql)
res = cursor.execute(sql) #执行sql语句，返回sql查询成功的记录数目
print(res)

cursor.close()
conn.close()

if res:
    print('登录成功')
else:
    print('登录失败')

3.2 execute()之SQL注入

注意：符号'- - 会注释掉它之后的SQL语句，正确的的语法：- -后至少有一个任意字符

根本原理：
就根据程序的字符串拼接name=‘%s’，我们输入一个xxx' - -haha，用我们输入的xxx加'在程序中拼接成一个判断条件name='xxx' -- haha

最后那一个空格，在一条sql语句中如果遇到select * from t1 where id > 3 -- and name='egon';则--之后的条件被注释掉了

#1、sql注入之：用户存在，绕过密码
egon' -- 任意字符'

#2、sql注入之：用户不存在，绕过用户与密码
xxx' or 1=1 -- 任意字符'

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

SQL注入的解决方法：

# 原来是我们对sql进行字符串拼接
# sql="select * from userinfo where name='%s' and >password='%s'" %(user,pwd)
# print(sql)
# res=cursor.execute(sql)

#改写为（execute帮我们做字符串拼接，我们无需且一定不能再为%s加引号了）
sql="select * from userinfo where name=%s and password=%s" >#！！！注意%s需要去掉引号，因为pymysql会自动为我们加上
res=cursor.execute(sql,[user,pwd]) #pymysql模块自动帮我们解决>sql注入的问题，只要我们按照pymysql的规矩来。

3.3 增、删、改：conn.commit()

import pymysql
#链接
conn=pymysql.connect(host='localhost',user='root',password='123',database='egon')
#游标
cursor=conn.cursor()

#执行sql语句
#part1
# sql='insert into userinfo(name,password) values("root","123456");'
# res=cursor.execute(sql) #执行sql语句，返回sql影响成功的行数
# print(res)

#part2
# sql='insert into userinfo(name,password) values(%s,%s);'
# res=cursor.execute(sql,("root","123456")) #执行sql语句，返回sql影响成功的行数
# print(res)

#part3
sql='insert into userinfo(name,password) values(%s,%s);'
res=cursor.executemany(sql,[("root","123456"),("lhf","12356"),("eee","156")]) #执行sql语句，返回sql影响成功的行数
print(res)

conn.commit() #提交后才发现表中插入记录成功
cursor.close()
conn.close()

3.4 查：fetchone, fetchall, fetchmany

在这里插入图片描述

import pymysql
#链接
conn=pymysql.connect(host='localhost',user='root',password='123',database='egon')
#游标
cursor=conn.cursor()

#执行sql语句
sql='select * from userinfo;'
rows=cursor.execute(sql) #执行sql语句，返回sql影响成功的行数rows,将结果放入一个集合，等待被查询

# cursor.scroll(3,mode='absolute') # 相对绝对位置移动
# cursor.scroll(3,mode='relative') # 相对当前位置移动
res1=cursor.fetchone()
res2=cursor.fetchone()
res3=cursor.fetchone()
res4=cursor.fetchmany(2)
res5=cursor.fetchall()
print(res1)
print(res2)
print(res3)
print(res4)
print(res5)
print('%s rows in set (0.00 sec)' %rows)

conn.commit() #提交后才发现表中插入记录成功
cursor.close()
conn.close()

'''
(1, 'root', '123456')
(2, 'root', '123456')
(3, 'root', '123456')
((4, 'root', '123456'), (5, 'root', '123456'))
((6, 'root', '123456'), (7, 'lhf', '12356'), (8, 'eee', '156'))
rows in set (0.00 sec)
'''

3.5 指针移动介绍（scroll）

import pymysql

conn = pymysql.connect(
    host='127.0.0.1',
    port=3306,
    user='root',
    passwd='1234',
    db='db1',
    charset='utf8'
)

cursor = conn.cursor(curcor=pymysql.cursors.DictCursor)


# 一. 相对移动(第二个参数默认relative): 相对于光标所在的位置继续往后移动1位
# cursor.scroll(1, 'relative')
cursor.scroll(1)
print(cursor.fetchone())  # 注意: 读取数据类似于文件指针的移动
cursor.scroll(1)
print(cursor.fetchmany(1))  
'''
执行结果:
{'cid': 2, 'caption': '三年三班'}
[{'cid': 4, 'caption': '二年九班'}]
'''

# 二. 绝对移动: 相对于数据的开头往后继续移动1位
cursor.scroll(1, 'absolute')
print(cursor.fetchone()) 
'''
执行结果:
{'cid': 2, 'caption': '三年三班'}

3.6 获取插入的最后一条数据的自增ID

import pymysql
conn=pymysql.connect(host='localhost',user='root',password='123',database='egon')
cursor=conn.cursor()

sql='insert into userinfo(name,password) values("xxx","123");'
rows=cursor.execute(sql)
print(cursor.lastrowid) #在插入语句后查看，获取插入的最后一条数据的自增ID，如果插入数据之前ID是10，执行execute之后返回值是11，返回结果是int类型

conn.commit()

cursor.close()
conn.close()

3.7 事务实现

import pymysql

# 1. 建立连接
conn = pymysql.connect(
    host='127.0.0.1',
    port=3306,
    user='root',
    password='123456',
    database='db1',
    charset='utf8'
)

# 2. 通过连接对象拿到游标对象
cursor = conn.cursor(cursor=pymysql.cursors.DictCursor)

# 3. 指定sql语句
user_info = [
    ('我', '123'),
    ('扣脚少年', '4179'),
    ('啪嗒星', '5438')
]

sql = "insert into t1(name, password) values (%s, %s);"
try:
    # 4. 提交sql语句给游标, 让游标帮你执行
    affected_rows = cursor.executemany(sql, user_info)
    print(affected_rows)
    # 5. 提交执行sql语句
    conn.commit()
except Exception as e:
    print(e)
    # 6. 语句出现异常回滚到初始状态
    conn.rollback()

cursor.close()
conn.close()
魏森林
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
python课堂笔记2数据分析
heyDana的博客
08-23 1424
用书：《python数据分析与应用》 语雀知识库 数据分析 第二章NumPy 数组ndarray 数组属性 创建数组 np.array([]) np.arange() np.linspace() np.logspace() np.zeros() np.eye() np.diag() np.ones() 生成随机数 np.random.random(10) np.random.rand(4,3) np.random.rand(4,3) np.random.randint(2,10,si
数据分析（numpy--matplotlib--pandas）基础笔记
longgecxl的博客
09-21 1798
第1章 python数据分析的概述 由于数据量比较大，已经远远超过了人力所能处理的范畴。那么管理和使用这些数据，就成为一个全新的研究课题 1.1 认识数据分析 数据分析技能，成为数据从业人员需要具备的技能之一。 明确数据分析概念、分析流程、和分析方法等相关知识，成为迈出数据分析的第1步 1.1.1 数据分析的概念 数据分析：就是用适当的方法，对收集来的数据进行分析，提取有用的信息和形成结论。以此帮助企业管理层做出决策 广义的数据分析：狭义数据分析...
day11-MySQL数据操作索引备份触发器
weixin_30677475的博客
03-26 293
第1章 上节课复习 1、数据库管理软件 本质就是套接字 2、基本概念 数据库服务器：运行数据库管理软件的计算机 数据库管理软件：MySQL，Oracle，DB2，SQL SERVER 库：文件夹 表：文件 记录：1，egon，19，male，oldboy 3、基本的S...
Python Day 41 Mysql 基础语法（三）Navicat介绍、pymysql模块、事务、视图、函数、存储过程、触发器...
dengweihua2701的博客
06-15 232
　　##Navicat介绍 #生产环境还是推荐使用mysql命令行，但为了方便我们测试，可以使用IDE工具 #下载链接：https://pan.baidu.com/s/1bpo5mqj 掌握： #1. 测试+链接数据库 #2. 新建库 #3. 新建表，新增字段+类型+约束 #4. 设计表：外键 #5. 新建查询 #6. 备份库/表 #注意： 批量加注...
python数据分析与应用
m0_51578985的博客
08-03 978
python数据分析三大库:numpy, matplotlib, pandas。
第八章| 3. MyAQL数据库|Navicat工具与pymysql模块 | 内置功能 | 索引原理
weixin_30408739的博客
05-02 227
1、Navicat工具与pymysql模块 在生产环境中操作MySQL数据库还是推荐使用命令行工具mysql，但在我们自己开发测试时，可以使用可视化工具Navicat，以图形界面的形式操作MySQL数据库 掌握： #1. 测试+链接数据库 #2. 新建库 #3. 新建表，新增字段+类型+约束 #4. 设计表：外键 #5. 新建查询 #6. 备份库/表 #注意： ...
Python 的 Pandas 统计分析基础
西门催学不吹雪
02-11 2563
文章目录1. pandas 介绍 1. pandas 介绍
Centos7-Linux
PAcaption的博客
08-18 2091
Centos7-Linux-RH Linux操作系统（百度百科）：全称GNU/Linux，是一套免费使用和自由传播的类UNIX操作系统，其内核由林纳斯·本纳第克特·托瓦兹于1991年第一次释出，它主要受到Minix和Unix思想的启发，是一个基于POSIX和Unix的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的Unix工具软件、应用程序和网络协议。它支持32位和64位硬件。Linux继承了Unix以网络为核心的设计思想，是一个性能稳定的多用户网络操作系统。Linux有上百种不同的发行版，
DataFrame基本操作
zhangzhoubin666的博客
11-17 6132
其实代码就是按照人的思维编写的底层，所有的函数都是按照人类的认知定义的。 1、读取表，设置类索引和行索引 datas=pd.DataFrame(数据表，index=list(''),columns=list('')) eg:df1 = pd.DataFrame(np.random.randn(3, 3), index=list('abc'), columns=list('ABC')) 2、格式化函数 .format() 格式化字符串函数str.format()将对应的字段转化成个性化的
python中的pymysql模块基本使用
01-06
使用pymysql模块 我已经在navicat里创建了taobao数据库，里面导入了一些数据，以供练习pymysql。 之后可以打开pycharm,新建一个项目，我的项目名称为lianxi_pymysql。 import pymysq db = pymysql.Connect( host = ...
pymysql模块的操作实例
09-08
**pymysql模块详解** _pymysql_ 是Python中用于操作MySQL数据库的一个第三方模块，它提供了与MySQL数据库交互的功能，包括连接、查询、插入、更新和删除等操作。以下将详细介绍如何使用pymysql模块进行数据库操作。...
pymysql模块使用简介与示例
12-16
**pymysql模块详解** _pymysql_ 是Python中用于连接MySQL数据库的第三方库，它提供了与MySQL服务器交互的功能，支持执行SQL语句、管理数据库等操作。在Python环境中，pymysql是作为标准的MySQL客户端来使用的，适用...
Python 解析pymysql模块操作数据库的方法
01-20
pymysql 是 python 用来操作MySQL的第三方库，下面具体介绍和使用该库的基本方法。 1.建立数据库连接 通过 connect 函数中 parameter 参数 建立连接，连接成功返回Connection对象 import pymysql #建立数据库连接 ...
Python中pymysql 模块的使用详解
12-26
pymysql 模块的使用 一、pymysql的下载和使用 （1）pymysql模块的下载 pip3 install pymysql （2）pymysql的使用 # 实现：使用Python实现用户登录，如果用户存在则登录成功（假设该用户已在数据库中） import ...
SpringBoot依赖之Quartz Scheduler定时调度器使用MySQL存储Job
最新发布
ahauedu的专栏
08-07 546
接上一篇。本篇将在 Spring Boot 项目中，使用 Quartz Scheduler 结合 MySQL 数据库来存储 Job。
04、MySQL-DCL（数据控制语言）
nibabaoo的博客
08-06 325
例：创建用户zhangsan 只能够在当前主机localhost访问 密码123456。例：创建用户xiaoming 可以在任意主机访问该数据库 密码123456。例：修改用户zhangsan的密码为654321。例：删除用户xiaoming。
MySQL —— CRUD
熵减玩家
08-06 979
MySQL的CURD 介绍
8.7-主从数据库的配置+mysql的增删改查
qq_70752758的博客
08-07 672
Slave_IO_Running和Slave_SQL_Running都是yes就表示主从数据库配置成功了。insert into 表名称 values(1,"name","word")先查看按照升序排列的qty，然后在这基础上在按照price的升序排列进行查看。当使用聚合查询以后，不能使用where，如果要使用，添加having。insert into 表名称 select * from 其他表。insert into 表 value () ,()创建可以远程登录的用户。查看升序排列的qty。
安装pymysql模块
10-22
安装 PyMySQL 模块有两种方法，一种是使用 curl 命令下载安装包安装，另一种是使用 git 命令下载安装包安装。在安装之前，需要确保已经安装了 Python3.x 版本。以下是具体步骤： 1.使用 curl 命令下载安装包安装： $ # X.X 为 PyMySQL 的版本号 $ curl -L https://github.com/PyMySQL/PyMySQL/tarball/pymysql-X.X | tar xz $ cd PyMySQL* $ python3 setup.py install $ # 现在你可以删除 PyMySQL* 目录 2.使用 git 命令下载安装包安装： $ git clone https://github.com/PyMySQL/PyMySQL $ cd PyMySQL/ $ python3 setup.py install 以上两种方法都可以安装 PyMySQL 模块，具体选择哪种方法可以根据自己的需求和喜好来决定。安装完成后，就可以在 Python3.x 中使用 PyMySQL 模块连接 MySQL 服务器了。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值