- 博客(2)
- 收藏
- 关注
RSS订阅原创 HBASE知识整理
HBASEHBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。HBASE的数据模型Name Space：命名空间，类似于关系型数据库的DatabBase概念Region：类似于关系型数据库的表概念。不同的是，HBase定义表时只需要声明列族即可，不需要声明具体的列。Row：HBase表中的每行数据都由一个RowKey和多个Column（列）组成，数据是按照RowKey的字典顺序存储的，并且查询数据时只能根据RowKey进行检索，所以RowKey的设计十分重要。Column：HBa
2020-09-07 15:47:06
217
原创 SparkRDD
RDDRDD定义弹性分布式数据集，弹性：存储弹性，内存与磁盘的自动切换容错弹性，数据丢失可以自动恢复计算弹性，计算出错重试机制分片弹性，可根据需要重新分片分布式：数据存储在大数据集群不同节点上数据集：RDD封装了计算逻辑，并不保存数据数据抽象：RDD是一个抽象类，需要子类具体实现不可变：RDD封装了计算逻辑是不可变的,如果想改变要重新定义RDD可分区、并行计算RDD的特性A list of partitions多个分区，分区可以看成是数据集的基本组成单位A function f
2020-09-01 19:27:03
291
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人