![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark
七分正经
这个作者很懒,什么都没留下…
展开
-
【Spark】Spark之读取Hbase数据库表并写入文件
import org.apache.hadoop.hbase.HBaseConfiguration import org.apache.hadoop.hbase.client.{HBaseAdmin, Result} import org.apache.hadoop.hbase.io.ImmutableBytesWritable import org.apache.hadoop.hbase.ma...原创 2018-06-19 18:36:02 · 1491 阅读 · 0 评论 -
【Spark】Spark连接mysql数据库
package com.menkoudai.loan.data.spark.scala import java.sql.{Connection, DriverManager, PreparedStatement} import java.util.Properties import org.apache.spark.sql.{DataFrame, SQLContext} import org....原创 2018-06-20 14:44:47 · 1289 阅读 · 0 评论 -
【Spark】Spark将计算结果写入到Mysql中
今天主要来谈谈如果将Spark计算的结果写入到Mysql或者其他的关系型数据库里面。其实方式也很简单,代码如下: package scala import java.sql.{DriverManager, PreparedStatement, Connection} import org.apache.spark.{SparkContext, SparkConf} object RDDto...转载 2018-06-20 16:33:23 · 1109 阅读 · 0 评论 -
【Spark】Spark 简单介绍
Spark官方网站 http://spark.apache.org Spark通用性解释 Spark的特点 官方网站都有。目前支持Java,Scala, Python,R。推荐使用Java和Scala,spark2中对python的支持不够好。 Spark的数据源 HDFS, HBase, Cassandra(类似于hbase数据库,国外用的多) Hive, Tachyo...转载 2018-08-09 10:35:10 · 224 阅读 · 0 评论