使用pandas读取csv并传入db2

本文介绍了如何在VSCode中利用pandas读取CSV文件,并生成SQL语句将数据批量插入到DB2数据库。首先导入pandas库,然后读取CSV文件,接着创建SQL插入语句,遍历数据帧(df)生成包含所有数据的SQL。最后,定义一个SQL执行函数,计算程序运行时间并执行SQL。
摘要由CSDN通过智能技术生成

我使用的开发工具是vscode。
首先导入所需要的包:

import pandas as pd 
import numpy as np
import ibm_db
import datetime

第一步我们首先读取两个csv,使用pandas

#读取两个csv进行拼接
df1 = pd.read_csv('input_data_1.csv')
df2 = pd.read_csv('input_data_2.csv')
df = df1.append(df2)
#对数据进行清洗,将nan替换为sql能够识别的0.0
df = df.replace(np.nan,0.0, regex=True)

这里注意我们打开的文件是放置在vscode打开的文件夹中,可以不需要指定文件位置。
经过第一步,我们获得了一个df。
然后我们创建一个sql语句:

insertsql = "insert into aaaa (id,name,property,desc) values "

遍历df,将属性值拼接在sql语句中

for index,row in df.iterrows():
    insertsql += ('(' + str(row['id'])+','+'\''+row['name']+'\''+','+str(row['property'])+','+'\''+row['desc']+'\'&#
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值