Python dataframe 直接导数据到impala

本文介绍了如何使用Python的DataFrame直接将数据写入Impala数据库,通过示例代码展示了安装所需包和使用to_sql方法的过程。注意,由于直接写入数据库速度较慢,大数据量时建议先导出为CSV文件。文章还提到了to_sql函数的一些关键参数,如表名、数据库连接、数据处理模式等。
摘要由CSDN通过智能技术生成

之前再看df 的方法的时候,突然看到有to_sql 的方法,看下是不是能直接到impala。
搞了半天,研究成功,分享一下,话不多说,直接上代码

安装Python 包,

pip install SQLAlchemy 
# 有的时候可能还要gcc
yum install gcc

deme 代码

from sqlalchemy import create_engine
from sqlalchemy.dialects.sqlite import INTEGER, VARCHAR, FLOAT
import pandas as pd
# 随便建个df
df = pd.DataFrame()
df['col1'] = [1,2,3,5]
df[
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值