databricks spark 读取postgresql表

lbl251

已于 2022-08-15 16:37:03 修改

阅读量537

点赞数

分类专栏： spark python azure 文章标签： postgresql spark 数据库

于 2022-08-15 16:35:24 首次发布

本文链接：https://blog.csdn.net/lbl251/article/details/126349538

版权

spark 同时被 3 个专栏收录

11 篇文章 0 订阅

订阅专栏

python

10 篇文章 0 订阅

订阅专栏

azure

8 篇文章 0 订阅

订阅专栏

1、来上货

driver = "org.postgresql.Driver"
url = "jdbc:postgresql://dbservice-url:port/库名"
user = "csl"
password = "******"

# 读取
jdbcDF3 = spark.read.format("jdbc") \
    .option("driver", driver)\
    .option("url", url) \
    .option("user", user) \
    .option("password", password) \
    .option("query","select * from arch_aclass") \
    .option('fetchsize',"1000") \
    .load()

display(jdbcDF3)
```![在这里插入图片描述](https://img-blog.csdnimg.cn/33d2f29cd3c346ed8cc8f4d4a8f579b4.png)