使用python实现自动建表将excel导入mysql

1、使用sqlalchemy将excel直接导入

import pandas as pd
import pymysql
from sqlalchemy import create_engine

df = pd.read_excel("D:/data.xlsx")

# 连接mysql数据库,假设用户名为user,密码为password,数据库名为db
engine = create_engine('mysql+pymysql://root:778778@localhost/testing')
conn = engine.connect()
# 根据excel列标签自动创建sql表语句,假设表名为table
sql_create = 'create table buy ('
for col in df.columns:
    sql_create += col + ' varchar(255),'
sql_create = sql_create[:-1] + ')'
# print(sql_create)

# 执行创建表的sql语句
conn.execute(sql_create)

# 将数据框df写入到mysql数据库中,假设表名为table
df.to_sql('buy', conn, if_exists='append', index=False)

# 关闭数据库连接
conn.close()

2、另一种方法是根据列标签创建sql语句 

import pymysql
import pandas as pd
import os
con = pymysql.connect(host='localhost', user='root',database='testing',
                      passwd='778778', charset='utf8')
cur = con.cursor()
df = pd.read_excel("C:/.xlsx")
sqlSentence1= 'create table tttt(企业名称 varchar(300),区域 varchar(200),生产地址 varchar(500),生产范围 varchar(5000),发证日期 date,有效日期 date\
,编号 varchar(500),分类码 varchar(200),社会信用代码 varchar(200),法定代表人 char(50),企业负责人 char(50),发证机关 varchar(200),备注 char(10))'

cur.execute(sqlSentence1)
length = len(df)
for i in range(0, length):
#     print(i)
    record = tuple(df.loc[i])
#     print(record)
    sqlSentence = "INSERT INTO tttt (企业名称,区域,生产地址,生产范围,发证日期,有效日期,编号,分类码,社会信用代码,法定代表人,企业负责人,发证机关,备注) VALUES(%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s)"
    sqlSentence = sqlSentence.replace('nan', 'null').replace('None', 'null').replace('none', 'null')

    cur.executemany(sqlSentence, [record])
cur.close()
con.commit()
con.close()
print(i)   

3、在datagrip中创建表直接导入

 

注意!datagrip中不支持excel格式,需要先转换成.csv格式 

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 在Python使用pandas库可以很方便地将Excel表格转换为DataFrame对象,然后再通过SQLAlchemy库将DataFrame对象插入MySQL数据库中。 首先需要安装pandas和SQLAlchemy库。打开终端(或命令提示符),输入以下命令: ``` pip install pandas pip install sqlalchemy ``` 接着,需要设置MySQL数据库连接信息。在Python中,可以通过创建一个数据库引擎对象来连接MySQL数据库。在这里,我们可以使用如下代码创建一个MySQL数据库引擎对象: ``` from sqlalchemy import create_engine engine = create_engine('mysql+pymysql://username:password@hostname:port/databasename') ``` 其中,`username`和`password`是MySQL数据库的用户名和密码,`hostname`是MySQL数据库所在的主机名或IP地址,`port`是连接MySQL数据库的端口号,默认为3306,`databasename`是要连接的数据库名。 在连接好数据库后,我们可以使用pandas库读取Excel表格,并将其转换为DataFrame对象: ``` import pandas as pd df = pd.read_excel('filepath/excel_file.xlsx') ``` 需要注意的是,`filepath`是Excel文件所在的路径,`excel_file.xlsx`是文件的名称,需要根据实际情况进行替换。 最后,我们可以将DataFrame对象插入到MySQL数据库中: ``` df.to_sql(name='table_name', con=engine, if_exists='replace', index=False) ``` 其中,`table_name`是要插入数据的MySQL表格名称,`if_exists`参数用于控制是否覆盖已有的表格信息,如果为`replace`,则会删除已有表格并重新创建一个新表格。`index`参数用于设置是否将DataFrame的索引列也写入到MySQL表格中。如果设置为`True`,则索引列也会写入到表格中。如果想要忽略索引列,可以设置为`False`。 以上就是使用PythonExcel导入MySQL的基本方法。需要注意的是,如果Excel文件中包含大量的数据或者表格中的列比较多,建议对数据进行适当处理,例如添加索引或者分批添加数据,以避免出现内存或性能问题。 ### 回答2: 使用PythonExcel导入MySQL可以通过以下几个步骤实现: 首先,需要安装Python的pandas库和MySQLdb库。可以使用pip命令进行安装。 其次,使用pandas读取Excel文件,并将其转换为DataFrame对象,可以使用以下代码进行读取: import pandas as pd data = pd.read_excel("data.xls") 将Excel中的数据读取到data变量中。 接着,连接MySQL数据库。可以使用MySQLdb库进行连接。以下是建立连接的代码示例: import MySQLdb db = MySQLdb.connect(host="localhost", user="root", passwd="password", db="mydatabase") 在建立连接之后,需要获取到MySQL数据库的游标,以便在Python中对MySQL进行操作。可以使用db.cursor()获取游标。 然后,可以通过DataFrame的to_sql()方法将读取到的Excel中的数据存储到MySQL中。以下是将数据存储到MySQL的代码示例: data.to_sql(name="mytable", con=db, if_exists="append", index=False) 其中,name指定存储至MySQL中的表名,con指定数据库连接,if_exists指定进行插入操作时的处理方式,index=False表示不添加索引。 最后,关闭游标和数据库连接。可以使用以下代码: db.close() 这样,就可以使用PythonExcel导入MySQL。 ### 回答3: Python是一种脚本编程语言,可以用于快速处理各种数据。在数据处理和管理方面,Python有很大的优势,因为它支持许多库和框架,可以帮助开发人员自动化数据导入和导出。在此过程中,使用PythonExcel文件导入MySQL数据库是一种常见的方法。下面是通过PythonExcel文件导入MySQL数据库的一些步骤: 步骤1:安装MySQL数据库和Python库 首先,需要安装MySQL数据库和Python的相关库。在安装MySQL之前,需要确定MySQL数据库服务器的名称,端口号,用户名和密码,以便在连接到数据库时正确配置连接参数。在Python库方面,通常使用openpyxl和pandas等库来读取和处理Excel文件。 步骤2:读取Excel文件 使用Python的openpyxl或pandas库可以读取Excel文件。这些库提供了各种函数来读取Excel文件并将其转换为Pandas数据帧。在读取Excel文件时,请确保Excel中的数据是清洁和完整的。 步骤3:将Excel数据转换为MySQL格式 在将Excel文件中的数据导入MySQL数据库之前,需要将Excel数据转换为MySQL数据格式。在这个步骤中,需要识别每个Excel列的数据类型,并将其映射到MySQL数据表中的适当列。在正确映射之后,可以将Excel数据表格保存为MySQL表格。 步骤4:将数据导入MySQL 一旦Excel数据已经转换为MySQL数据格式,便可以将其导入MySQL数据库。这可以使用Python的pymysql库来实现使用该库可以在Python中连接到MySQL数据库并执行SQL语句。 步骤5:验证数据 导入数据后,应对数据进行验证以确保正确性。在验证过程中,请仔细查看MySQL表以确保它包含所有Excel数据和正确的格式。 总的来说,利用PythonExcel文件导入MySQL数据库是一种方便快捷的方法。尽管可能需要一些额外的时间和努力来设置和调试该过程,但是一旦配置完成并且正确运行,这将极大地提高数据处理和管理的效率。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值