Python3,多种方法,同时执行多条SQL语句,并把查询结果分别写入不同Sheet页,妥妥的学到了。

1、引言

小屌丝:鱼哥,我想请教一个问题。
在这里插入图片描述
小鱼:国庆假期你经历了什么,让你变得如此的 “善良”?
小屌丝:别这么说,我一直很善良,至少,很正直…
小鱼:打住,直接点, 你有什么需要帮助的?
小屌丝:我就是想把查询的结果也入到excel表中
小鱼:然后呢?
小屌丝:sqlserver数据库。
小鱼:…好吧,还有其他要求吗?
小屌丝:没有了。
小鱼:OK,我就花费几分钟,给你整一个。
在这里插入图片描述

2、代码实战

2.1 openpyxl写入excel

2.1.1 安装

凡是涉及第三方库,必须需要安装,
老规矩,直接pip安装

pip install openpyxl
pip install pymssql

其它安装方式,直接看这两篇:

2.1.2 代码

代码示例

# -*- coding:utf-8 -*-
# @Time   : 2022-10-10
# @Author : Carl_DJ


'''
实现功能:
    1、python直接链接sqlserver数据库,读取数据库内容
    2、执行 查询结果,并写入到excel表中
应用模块:
	pymssql,os,openpyxl

'''
import os
import pymysql #mysql数据库链接
import pymssql #sqlserver数据库链接
import openpyxl



#输出文件夹
outfile_path = './data'

#如果没有outfile_path 这个文件夹,就自动创建
if not os.path.exists(outfile_path):
    os.mkdir(outfile_path)

#输出文件名称
filename = r'SQLtest.xlsx'
file_path= os.path.join(outfile_path,old_filename)


#创建数据库链接
#链接SqlServer
conn = pymssql.connect(host = "localhost",
					   port = 3306,
					   user = "",
					   psd = "",
					   database = "")

if conn:
    print("数据库链接成功")

time.sleep(3)

#sql查询语句
sql = "select UUID,KEYID,TYPE,NAME,PRICE from KEY_INFO WHERE NAME LIKE '%测试商品名称'"


#创建游标
cur = conn.cursor()
#执行sql语句
cur.execute(sql)

#返回查询结果
result = cur.fetchall()

#创建一个工作簿对象
wb = openpyxl.Workbook()
#定义sheet名
Key_Info_sheet = wb.create_sheet('KEY_INFO ',0)

#获取默认sheet页
# Key_Info_sheet = book.active

#获取表头信息
h1 = [filed[0] for filed in cur.description]
Key_Info_sheet.append(h1)
for i in result:
    Key_Info_sheet.append(i)
wb.save(file_path)


# 关闭数据库链接
cur.close()
conn.close()

执行结果
在这里插入图片描述

嗯,这就非常完美的写入excel了。

2.2 pandas写入excel

小屌丝:鱼哥,我这一次要执行多个SQL语句,
小鱼:… 你不是说没有了吗
小屌丝:突然想起来的。
小鱼:好吧,还有其他的要求吗?
小屌丝:然后把每个SQL查询结果写入不同的sheet页
在这里插入图片描述

小鱼:xxxxxx!!还有吗????!!!
小屌丝:没有了。
小鱼:有也没有。

关于小屌丝提的要求, 我换一个写法,毕竟,多学几个知(姿 )识( ),百利而无一害。
在这里插入图片描述

2.2.1 安装

这次有pandas来写。
所以,第一步,安装

pip install pandas

其它安装方式,直接看这两篇:

2.2.2 代码

sql文档
在这里插入图片描述

代码示例

# -*- coding:utf-8 -*-
# @Time   : 2022-10-10
# @Author : Carl_DJ

'''
实现功能:
    1、python直接链接SqlServer数据库,实现SQL查询
    2、同时执行多条sql语句,查询结果分别写入不同的sheet页中;
应用模块:
    pandas,pymssql,os,time

'''
import pandas as pd
from pandas.io import sql
import pymssql
import time,os

#设置时间戳
now = time.strftime("%Y_%m_%d-%H%M%S",time.localtime())
print(f'执行时间:{now}')

#创建数据库链接
#链接SqlServer
conn = pymssql.connect(host = "localhost",
						port = 3306,
						user = "",
						psd = "",
						database = "")

if conn:
    print("数据库链接成功")

time.sleep(3)

#输出文件夹
file_path = './data'

#如果没有outfile_path 这个文件夹,就自动创建
if not os.path.exists(file_path):
    os.mkdir(file_path)
    
#输出文件格式
Outfile_name = ( 'SqlsTest' + now + '.xlsx')
#读取sql文件名称
sqls_name = r'SqlsFile.txt'
#sql执行脚本文件(参数化路径)
MCsql_file = os.path.join(file_path,MCsql_name)
#输出文件夹路径
Outfile_path = os.path.join(file_path,Outfile_name)

#把查询结果写入不同的sheet页,对sheet页进行命名
sheet_names = ['KEY_INFO','PRO_INFO']

#定义读取sql方法,返回sql语句
def sqls(MCsql_file):
    global sqlstrs
    with open(MCsql_file,'r',encoding='utf-8') as f:
        #每个sql之间,以“;”作为分隔符
        sqlstrs = f.read().split(';')

#定义数据查询方法
def quert_method(sql_str):
    #设置全局变量
    global df
    df = pd.read_sql(sql_str,con=conn)

#执行程序
if __name__ == '__main__':
    sqls(MCsql_file)
    #写入excel文件
    with pd.ExcelWriter(Outfile_path) as writer:
        for i in range(0,len(sqlstrs)):
            quert_method(sqlstrs[i])
            df.to_excel(writer,sheet_name=sheet_names[i],index=False,header=True)

print("数据写入完成!")

# 关闭数据库链接
conn.close()
print("数据库链接关闭!")

执行结果
在这里插入图片描述

3、总结

看到这里,今天的分享差不多就完成了。
今天主要通过链接SqlServer数据库,把查询数据结果写入到excel表中。
同时,应用openpyxl 和pandas两个模块,分别对excel的操作。
如果对pandas不调了解,可以阅读小鱼的这篇博文

我是小鱼

关注我,带你学习Python领域更多更专业的技能。

  • 8
    点赞
  • 32
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
在 SQL Server 中,使用 INSERT 语句可以向表中添加新的行。如果想要加速 INSERT 操作,可以考虑使用并行插入,以便在多个处理器上同时执行插入操作。以下是实现并行插入的步骤: 1. 首先,将目标表设置为允许并行插入。可以使用以下命令来查看当前是否启用了并行插入: ```sql SELECT is_parallel_insert_on FROM sys.databases WHERE name = 'database_name'; ``` 如果返回结果为 1,则表示启用了并行插入。如果返回结果为 0,则需要启用并行插入。 启用并行插入的命令如下: ```sql ALTER DATABASE database_name SET PARALLEL_INSERT ON; ``` 2. 然后,在 INSERT 语句中使用 TABLOCK hint,以便在执行插入操作时锁定整个表。这样可以确保多个线程不会同时尝试插入同一行,从而提高并行插入的效率。 INSERT 语句如下: ```sql INSERT INTO table_name WITH (TABLOCK) (column1, column2, ..., columnN) VALUES (value1, value2, ..., valueN); ``` 3. 最后,使用多个连接同时执行 INSERT 语句。可以使用多个线程或使用 BULK INSERT 命令来实现。 使用多个线程执行 INSERT 语句的示例代码如下: ```sql -- 创建线程表 CREATE TABLE thread_table (thread_id INT PRIMARY KEY); -- 插入线程数据 INSERT INTO thread_table VALUES (1), (2), (3), (4); -- 使用多个线程执行 INSERT 语句 DECLARE @thread_id INT; DECLARE @sql NVARCHAR(MAX); DECLARE thread_cursor CURSOR FOR SELECT thread_id FROM thread_table; OPEN thread_cursor; FETCH NEXT FROM thread_cursor INTO @thread_id; WHILE @@FETCH_STATUS = 0 BEGIN SET @sql = 'INSERT INTO table_name WITH (TABLOCK) (column1, column2, ..., columnN) VALUES (value1, value2, ..., valueN);'; EXECUTE sp_executesql @sql; FETCH NEXT FROM thread_cursor INTO @thread_id; END CLOSE thread_cursor; DEALLOCATE thread_cursor; ``` 使用 BULK INSERT 命令执行 INSERT 操作的示例代码如下: ```sql BULK INSERT table_name FROM 'data_file' WITH (TABLOCK); ``` 需要注意的是,并行插入操作可能会占用更多的系统资源,在高并发环境下可能会导致性能问题。因此,在使用并行插入时需要权衡性能和系统资源的消耗。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Carl_奕然

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值