Hbase
七分正经
这个作者很懒,什么都没留下…
展开
-
【HBase】HBase工作原理
HBASE原理一、原理1、物理存储1.hregionhbase表中的数据按照行键的字典顺序排序,hbase表中的数据按照行的的方向切分为多个region。最开始只有一个region随着数据量的增加,产生分裂,这个过程不停的进行。一个表可能对应一个或多个region。region是hbase表分布式存储和负载均衡的基本单元,一个表的多个region可能...转载 2020-04-24 13:35:25 · 441 阅读 · 0 评论 -
【Spark】Spark之读取Hbase数据库表并写入文件
import org.apache.hadoop.hbase.HBaseConfigurationimport org.apache.hadoop.hbase.client.{HBaseAdmin, Result}import org.apache.hadoop.hbase.io.ImmutableBytesWritableimport org.apache.hadoop.hbase.ma...原创 2018-06-19 18:36:02 · 1503 阅读 · 0 评论 -
【Spark】Spark将计算结果写入到Mysql中
今天主要来谈谈如果将Spark计算的结果写入到Mysql或者其他的关系型数据库里面。其实方式也很简单,代码如下:package scalaimport java.sql.{DriverManager, PreparedStatement, Connection}import org.apache.spark.{SparkContext, SparkConf}object RDDto...转载 2018-06-20 16:33:23 · 1116 阅读 · 0 评论