psycopg2简单插入和查询(直接查找为dataframe)

导入与创建连接

import psycopg2
conn = psycopg2.connect(database='dbschool', user='postgres', password='admin', host='127.0.0.1', port='5432')
cur = conn.cursor()

connection

主要方法

connection提供了常用的数据库操作:
commit():提交任何未提交的事务(transaction)到数据库。
rollback():回滚。
close():关闭数据库。如果关闭数据库时仍有未提交的事务,则执行回滚操作。

cursor

主要方法

  • execute(query, vars=None):执行SQL语句。
  • fetchall():获取所有查询结果,返回值为tuple列表。

插入数据

#单条插入
cur.execute("INSERT INTO Employee VALUES('Gopher', 'China Beijing', 100, '2017-05-27')")
#批量插入
placeholders = ', '.join(['%s'] * df.shape[1])
columns_str = ', '.join(columns)
sql = "insert into {}({})values ({})".format('ceexam', columns_str, placeholders)
cur.executemany(sql,df.values)

注:

批量插入支持格式:字典,python数组,numpy数组

查询数据

普通

cur.execute("SELECT * FROM Employee")
rows = cur.fetchall()
for row in rows:
    print('name=' + str(row[0]) + ' address=' + str(row[1]) +
        ' age=' + str(row[2]) + ' date=' + str(row[3]))

主要使用pd分析,直接导出为dataframe格式

conn = psycopg2.connect(database='dbschool', user='postgres', password='admin', host='127.0.0.1', port='5432')
sql_getall='select * from ceexam'
df=pd.read_sql(sql=sql_getall,con=conn)

转载于:https://www.cnblogs.com/yyjjtt/p/11255044.html

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
psycopg2是一个Python数据库驱动程序,用于连接和操作PostgreSQL数据库。在进行数据库批量插入操作时,可以使用psycopg2的executemany方法。然而,实际执行时可能会发现插入速度较慢。这是因为psycopg2的executemany方法并不真正执行批量插入,而是将每条数据当作单独的插入操作执行,导致速度变慢。 为了解决这个问题,可以使用psycopg2的extras模块中的execute_values方法进行批量操作。通过查看psycopg2的源码,可以找到这个方法并进行替换,从而实现真正的批量插入操作,提高插入速度。参考中的链接提供了相关的技巧和示例代码。 下面是一个使用psycopg2进行批量插入的方法示例: ```python import psycopg2 from psycopg2 import extras def insertManyRow(strings): try: conn = psycopg2.connect(database="数据库", user="用户名", password="密码", host="ip", port="端口号") cur = conn.cursor() sql = "INSERT INTO test(字段1,字段2,字段3,字段4,字段5) VALUES(%s,%s,%s,%s,%s)" extras.execute_values(cur, sql, strings) conn.commit() conn.close() except Exception as e: print("执行sql时出错:%s" % (e)) conn.rollback() conn.close() ``` 在这个示例中,使用了psycopg2的extras模块中的execute_values方法来执行批量插入操作。将插入的数据作为参数传递给该方法,同时指定插入的SQL语句和参数的位置。通过这种方式,可以提高插入的效率。参考中的psycopg2文档可以了解更多关于该方法的详细信息。 此外,参考提供了一个在Stack Overflow上的讨论链接,其中讨论了使用psycopg2进行快速批量插入的方法,也可以供您参考。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [Postgresql (GreenPlum) psycopg2的批量数据插入](https://blog.csdn.net/xiaodongxiexie/article/details/104048068)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* *3* [【python】爬虫篇:python使用psycopg2批量插入数据(三)](https://blog.csdn.net/lsr40/article/details/83537974)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值