pandas转mysql特定列_在pandas.DataFrame.to_sql时指定数据库表的列类型

在使用pandas的to_sql方法将DataFrame存储到MySQL时,如果不预先创建表,数据库会自动根据数据类型创建列,但可能不匹配预期。通过设置to_sql的dtype参数,可以指定列的SQL类型。文章介绍了如何根据DataFrame的dtypes动态生成映射字典,以实现按数据类型转换。提供了一个函数mapping_df_types,它根据DataFrame的列名和数据类型生成适合MySQL的列类型映射。
摘要由CSDN通过智能技术生成

问题

在数据分析并存储到数据库时,Python的Pandas包提供了to_sql 方法使存储的过程更为便捷,但如果在使用to_sql方法前不在数据库建好相对应的表,to_sql则会默认为你创建一个新表,这时新表的列类型可能并不是你期望的。例如我们通过下段代码往数据库中插入一部分数据:

import pandas as pd

from datetime import datetime

df = pd.DataFrame([['a', 1, 1, 2.0, datetime.now(), True]],

columns=['str', 'int', 'float', 'datetime', 'boolean'])

print(df.dtypes)

通过dtypes可知数据类型为object, int64, float64, datetime64[ns], bool

如果把数据通过to_sql方法插入到数据库中:

from sqlalchemy import create_engine

engine = create_engine("mysql+mysqldb://{}:{}@{}/{}".format('username', 'password', 'host:port', 'database'))

con = engine.connect()

df.to_sql(name='test', con=con, if_exists='append', index=False)

用MySQL的desc可以发现数据

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值