Python3中pandas.DataFrame.to_sql指定数据库表的列类型(dtype)和存取数据时遇到的坑

最新推荐文章于 2024-05-28 09:40:41 发布
最新推荐文章于 2024-05-28 09:40:41 发布
阅读量1.3w 收藏 21
点赞数 3
文章标签： python3 postgresql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mary12372/article/details/88614784
版权

工具：Pycharm
Python版本：3.6
数据库：postgresql

问题：
Python中生成的Dataframe通过df.to_sql导入数据库，在数据库中直接新建的表的数据类型与sql语言中的数据类型不符，想要更改。

DataFrame.to_sql 官方文档：
http://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.DataFrame.to_sql.html


df.to_sql('数据库表名 ', con=engine, index=False, if_exists='append')

在postgresql里面得到的结果如下：
在这里插入图片描述
坑来了：
用Python查询的时候，总是报错：关系不存在
在这里插入图片描述
在网上查了半天，看到了这个经验帖：

最低0.47元/天 解锁文章
大米同学
关注
  • 3
    点赞
  • 踩
  • 21
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
pandas转mysql特定列_在pandas.DataFrame.to_sql时指定数据库表的列类型
weixin_35550400的博客
01-27 529
问题在数据分析并存储到数据库时，Python的Pandas包提供了to_sql 方法使存储的过程更为便捷，但如果在使用to_sql方法前不在数据库建好相对应的表，to_sql则会默认为你创建一个新表，这时新表的列类型可能并不是你期望的。例如我们通过下段代码往数据库中插入一部分数据：import pandas as pdfrom datetime import datetimedf = pd.Dat...
在pandas.DataFrame.to_sql时指定数据库表的列类型
weixin_33863087的博客
01-24 1383
问题 在数据分析并存储到数据库时，Python的Pandas包提供了to_sql 方法使存储的过程更为便捷，但如果在使用to_sql方法前不在数据库建好相对应的表，to_sql则会默认为你创建一个新表，这时新表的列类型可能并不是你期望的。例如我们通过下段代码往数据库中插入一部分数据： import pandas as pd from da...
python将dataframe指定列更新至Mysql
LZX的博客
11-30 1504
【代码】python将dataframe指定列更新至Mysql。
【Pandas】深入解析`pd.to_sql()`函数
最新发布
qq_38614074的博客
05-28 1134
函数是Pandas库中的一个方法，它允许我们将DataFrame对象中的数据写入SQL数据库。该函数的主要参数包括数据库连接对象、表名、数据框、是否创建表（如果表不存在）、索引处理、数据类型映射等。下面我们将详细解析这些参数。函数是Pandas库中一个非常实用的功能，它允许我们将DataFrame中的数据轻松写入SQL数据库。通过深入了解其参数和用法，我们可以更加高效、安全地将数据从Pandas转移到SQL数据库中。希望本文的解析和案例能够帮助你更好地理解和使用函数。
python连接数据库——create_engine和conn.cursor
weixin_30545285的博客
08-22 1215
python操作数据库的方法： 一种是导入sqlalchemy包，另一种是导入psycopg2包。 具体用法如下（此处以postgre数据库举例） 第一种： # 导入包 from sqlalchemy import create_engine import pandas as pd from string import Temp...
Pandas的to_sql函数使用索引的坑
六月闻君
06-30 1068
pandas的to_sql函数index=True时，存在一个bug 。 （1）append时 - 如果索引字段是TEXT类型，不报错，数据导入，在表上不创建索引。 - 如果索引字段是int类型，正常导入数据，表上也有默认索引。 （2）replace时 - 如果索引字段是TEXT类型，报错，原因是在表上创建索引失败，只能创建表结构，不能导入数据。 - 如果索引字段是int类型，正常导入数据，表上也有默认索引。
pyspark.sql.DataFrame与pandas.DataFrame之间的相互转换实例
01-21
代码如下，步骤流程在代码注释中可见： # -*- coding: utf-8 -*- import pandas as pd from pyspark.sql import SparkSession from pyspark.sql import SQLContext from pyspark import SparkContext #初始化数据 #...
pandas实现to_sql将DataFrame保存到数据库中
12-26
在数据分析时，我们有中间结果，或者最终的结果，需要保存到数据库中；或者我们有一个中间的结果，如果放到数据库中通过sql操作会更加的直观，处理后再将结果读取到DataFrame中。这两个场景，就需要用到DataFrame的...
python中pandas.DataFrame的简单操作方法（创建、索引、增添与删除）
12-24
最近在网上搜了许多关于pandas.DataFrame的操作说明，都是一些基础的操作，但是这些操作组合起来还是比较费时间去正确操作DataFrame，花了我挺长时间去调整BUG的。我在这里做一些总结，方便你我他。感兴趣的朋友们一...
pandas中的to_sql的使用
qq_37898024的博客
02-24 2万+
1.to_sql的作用： to_sql是pandas中的DataFrame数据类型提供的一个API，可以将整个DF导入数据库中，其中有几个参数的作用为： name: 数据库中的表名 con: 与read_sql中相同，数据库连接的驱动 if_exits： 当数据库中的这个表存在的时候，采取的措施是什么，包括三个值，默认为fail fail，若表存在，则不进行数据表写入的相关操作 replace：若表存在，将数据库表中的数据覆盖； append：若表存在，将数据写到原表的后面。 index：是否将df
pandas 写入mysql数据库.to_sql方法详解
热门推荐
LeiLiFengX的博客
11-22 5万+
pandas 写入mysql数据库.to_sql方法详解 DataFrame.to_sql(self,name,con,schema=None,if_exists=’fail’,index=True,index_label=None,chunksize=None,dtype=None,method=None) 再官方文档中已经详细描述to_sql()方法使用方式 .to_sql()方法的定义： def to_sql(self, name, con, schema=None, ...
Pandas to_sql详解
简介不重要
06-29 5103
源码： def to_sql( self, name, con, schema=None, if_exists="fail", index=True, index_label=None, chunksize=None, dtype=None, ...
pandas数据读取与存储
python_new的博客
05-08 7148
数据读取与存储1常用数据的读取1.1读取csv文件1.2使用read_table读取数据1.3读取mysql数据(未使用ssh通道)1.4读取excel数据1.5读取Mongodb数据1.6读取api接口数据2.常用数据的存储2.1写入csv文件2.2写入excel文件2.3写入数据库中 1常用数据的读取 1.1读取csv文件 import pandas as pd 例：data= pd.read...
python to sql_Python Pandas pandas.DataFrame.to_sql函数方法的使用
weixin_39641257的博客
11-30 990
DataFrame.to_sql (name，con，schema = None，if_exists ='fail'，index = True，index_label = None，chunksize = None，dtype = None ) [source]将存储在DataFrame中的记录写入SQL数据库。支持SQLAlchemy [R16]支持的数据库。可以新创建，附加或覆盖表。参数：na...
python to sql_python的to_sql那点儿事
weixin_39829497的博客
11-30 750
to_sql结论可以对齐字段（dataframe的columns和数据库字段一一对齐）可以缺少字段（dataframe的columns可以比数据库字段少）不可以多出字段，会报错if_exists='append’进行新增（bug：如果设置了PK,ignore 和 replace会报错）一定要先创建好数据库，设置好格式，否则使用if_exists='append’自动创建的字段格式乱七八糟项目需求e...
Python pandas.DataFrame.to_sql用法
weixin_42410014的博客
07-19 7826
Python pandas.DataFrame.to_sql用法
pandas之to_sql
浪ふ沏沙的博客
07-19 5942
今天写一个mysql的自动化脚本，遇见了一些问题，最终折腾了很久终于搞定了。 python3.6,在使用pandas处理dataframe，写入数据库用了to_sql,数据库的连接不能使用pymysql的connect。于是选择了sqlalchemy得create_engine。 在data.to_sql("mytable",conn,index=False)的时候提示没有mysqldb，查了...
pandas read_sql 和 to_sql 读写Mysql的参数详解
sanylove的博客
06-24 5529
Pandas 读写 Mysql 主要用到两个函数，下面分析一下 pandas.read_sql() 和 DataFrame.to_sql() 的参数。 参数： 注意点: 参数：
那些年我们在python掉进的坑系列之一pandas的to_sql
qq_34685317的博客
06-07 3万+
在目前大数据和人工智能的大趋势下，越来越多的人开始学习python作为自己入手数据和AI的第一门语言，笔者也是如此。很多人在接触python的第一步都是学习pandas，主要是这个框架是最接近于R和Matlab学习起来轻松易懂。但是在pandas的使用中，有很多问题和很多人因为对编程和计算机概念不理解，导致很多很多的坑，笔者在此开一个系列博文，不定期更新中会将自己遇到的坑介绍给大家。 p
python dataframe loc函数_python pandas.DataFrame.iloc函数使用详解
06-07
pandas.DataFrame.iloc 函数用于按位置选择行和列，它的语法格式如下： ``` python df.iloc[row_indexer,column_indexer] ``` 其中，row_indexer 是行的位置或行的布尔条件，column_indexer 是列的位置或列的布尔...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值