大数据学习之路82-利用foreachPartition将数据写入数据库

最新推荐文章于 2022-04-24 18:14:17 发布

未来@音律

最新推荐文章于 2022-04-24 18:14:17 发布

阅读量2k

点赞数

分类专栏：大数据生态圈从入门到精通

本文为博主原创文章，未经博主允许不得转载。

本文链接：https://blog.csdn.net/qq_37050372/article/details/82848330

版权

大数据生态圈从入门到精通专栏收录该内容

131 篇文章 36 订阅 ¥19.90 ¥99.00

订阅专栏

这篇博客介绍了如何在大数据处理中使用foreachPartition方法，将计算结果有效地存入数据库，结合实例代码展示了操作过程，并附上了成功的截图。

摘要由CSDN通过智能技术生成

在上一次计算的结果的基础上，我们可以将该结果写入数据库

下面贴出代码：

def data2MySql(part:Iterator[(String,Int)]) = {
    val conn: Connection = DriverManager.getConnection("jdbc:mysql://localhost:3306/lfr","root","123456")
        val p = conn.prepareStatement("insert into access_log(province,counts) values(?,?)")
    part.foreach(
        data => {
          println(data._1)
          println(data._2)
            p.se

了解本专栏