将sparkSql结果导入到mysql中

 

上面是DataFrame运行的结果

想要将数据存入到mysql需要如下操作

//df9是DataFrame名

//第一个参数是url路径,第二个参数是表名,第三个参数是配置文件

df9.write.mode("append"). jdbc("","",)

 如果忘了参数,可以ctrl+p,查看参数

接下来就是写括号里面的参数

第一个参数

//url路径格式jdbc:mysql://localhost:3306/数据库名
val url="jdbc:mysql://localhost:3306/week2_9"
//url路径格式jdbc:mysql://localhost:3306/数据库名
    val url="jdbc:mysql://localhost:3306/week2_9"

 第二个参数

 

//写你要将内容放在哪张表里,表不用提前创建
val table="pc"
//写你要将内容放在哪张表里,表不用提前创建
    val table="pc"

注:这张表不用提前创建,数据库中不要有这张表,很重要!!! 

 

 第三个参数

 

//配置你们数据库用户名和密码
val properties = new Properties()
properties.put("user","root")
properties.put("password","root")
//配置你们数据库用户名和密码
    val properties = new Properties()
    properties.put("user","root")
    properties.put("password","root")

 

将以上三个参数写在咱们一开始说的方法中 

 

df9.write.mode("append").jdbc(url,table,properties)
df9.write.mode("append").jdbc(url,table,properties)

 

最后咱们看效果 

 

  • 2
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Spark SQL 的结果数据保存到 MySQL 数据库可以通过 JDBC API 实现。下面是一个简单的示例代码: ```scala import java.util.Properties import org.apache.spark.sql.{SaveMode, SparkSession} object SaveToMysql { def main(args: Array[String]): Unit = { val spark = SparkSession.builder() .appName("SaveToMysql") .master("local[*]") .getOrCreate() // 读取数据 val df = spark.read.format("csv") .option("header", true) .option("inferSchema", true) .load("data.csv") // 处理数据 val result = df.select("name", "age").filter("age > 18") // 保存数据MySQL 数据库 val url = "jdbc:mysql://localhost:3306/test" val table = "result" val properties = new Properties() properties.setProperty("user", "root") properties.setProperty("password", "123456") properties.setProperty("driver", "com.mysql.jdbc.Driver") result.write.mode(SaveMode.Append) .jdbc(url, table, properties) spark.stop() } } ``` 上面的代码首先通过 SparkSession 对象创建一个 Spark 应用程序,并读取一个 CSV 文件作为输入数据。然后对数据进行处理,保留 name 和 age 两列,并筛选出 age 大于 18 的数据。最后,将结果数据保存到 MySQL 数据库。在保存数据时,需要指定数据库连接 URL、表名和访问数据库的用户名和密码等参数。这里使用了 Append 模式,表示将结果数据追加到表,如果表不存在则自动创建。如果需要覆盖表数据,则可以使用 Overwrite 模式。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值