sparkSQL外部数据源读JDBC

最新推荐文章于 2024-02-23 14:03:23 发布

FangStar8Jeff

最新推荐文章于 2024-02-23 14:03:23 发布

阅读量142

点赞数

分类专栏： Spark

本文链接：https://blog.csdn.net/qq_34341930/article/details/97891168

版权

Spark 专栏收录该内容

22 篇文章 1 订阅

订阅专栏

def getDataFrameFromDb(spark: SparkSession, jdbcUrl: String, userName: String, password: String, queryString: String,driverClass: String="com.mysql.jdbc.Driver"): DataFrame = {
    spark.read.format("jdbc").options(
      Map("url" -> jdbcUrl,
        "dbtable" -> queryString,
        "driver" -> driverClass,
        "user" -> userName,
        "password" -> password
      )).load()
  }

返回一个DF