RDD从mysql中读取数据和RDD往数据库中存数据

package com.day_212

import java.sql.DriverManager

import org.apache.spark.rdd.JdbcRDD
import org.apache.spark.{SparkConf, SparkContext}

/**
 * TODO
 *
 * @author 徐磊
 * @email [email protected]
 * @data2020/02/12 下午 07:48
 * @最终需求效果:
 */
object One extends App {
val con = new SparkConf().setAppName("rddmysql").setMaster("local[2]")
  val sc = new SparkContext(con)
  //********************************直接从mysql中读取数据(并且加条件)
  val getcon=()=>{
    Class.forName("com.mysql.jdbc.Driver").newInstance()
    DriverManager.getConnection("jdbc:mysql://node132:3306/xss","root","root")
  }
  val jdbcmysql=new JdbcRDD(
    sc,  //sc程序入口
    getcon,  // 数据库连接
    "select * from student where id >=? and id <=?",  //条件查询语句
    2,  //最小值
    3,  //最大值
    2,  //partition分区
    ressultSet=>{//返回内容(获取内容)   ressultSet是自己起的别名,可以随便起
  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值