spark写mysql坑_Spark SQL将数据写入Mysql表的一些坑

最近，在使用Spark SQL分析一些数据，要求将分析之后的结果数据存入到相应的MySQL表中。

但是将数据处理完了之后，存入Mysql时，报错了：

代码的基本形式为:

val r1: Dataset[Row] = data.groupBy(***)...

r1.write.jdbc(url,"iptimecount",prop)    根据图片中的报错，搜索资料，得知是由于Spark SQL 中的Save Mode导致的，

Spark SQL的官方文档中对Savemode进行了说明：

默认情况下，使用SaveMode.ErrorIfExists，也就是说，当从Spark中插入到MySQL表中的时候，如果表已经存在，则直接报错，想想真觉得这默认值有点坑。

于是修改Savemode，将代码改成:

r1.write.mode(SaveMode.Append).jdbc(url,"iptimecount",prop)

再次执行，本以为应该会顺利存入到数据库