Hbase
Hbase从入门到放弃
不温卜火
大数据开发/数据采集/数据清洗/数据分析/数据可视化
关注我!共同学习!!!
展开
-
HBase项目实战系列(1) | Weibo项目简易版(附全代码)
此篇为大家带来的是HBase项目实战系列(1) | 谷粒微博全过程。 目录1. 需求分析2. 代码实现1 代码设计总览:2. 创建项目及添加依赖3. 创建命名空间以及表名的定义 1. 需求分析 1.微博内容的浏览,数据库表设计 2.用户社交体现:关注用户,取关用户 3.拉取关注的人的微博内容 微博表的分析 1. 2. 项目所需要的表 2. 代码实现 1 代码设计总览: 1.创建命名空间以及表名的定义 2. 创建微博内容表 3.创建用户关系表 4.创建用户微博内容接收邮件表 5.发布微博原创 2020-06-08 10:44:58 · 6991 阅读 · 39 评论 -
HBase快速入门系列(10) | HBase知识点总结(建议收藏!)
此篇为大家带来的是HBase知识点总结(建议收藏!)。 目录1. 读写请求会集中到某一个RegionServer上 如何处理(数据倾斜)2. hbase查询一条记录的方法是什么?Hbase写入一条记录的方法是什么?3. 描述hbase的rowkey的设计原理4. hbase中compact的用途是什么,什么时候触发,分为哪两种,有什么区别。5. Hbase的原理 regionserver挂了 如何恢复数据 ?新的数据从Hlog里读出来是如何恢复的6. 讲一下Hbase,Hbase二级索引用过吗7. Hb原创 2020-06-07 09:24:21 · 5768 阅读 · 30 评论 -
HBase快速入门系列(9) | HBase优化
此篇为大家带来的是HBase优化。 目录1. HBase HA(高可用)2. 预分区3. RowKey设计4. 内存优化5. 基础优化 1. HBase HA(高可用) 在HBase中Hmaster负责监控RegionServer的生命周期,均衡RegionServer的负载,如果Hmaster挂掉了,那么整个HBase集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以HBase支持对Hmaster的高可用配置。 1. 关闭HBase集群(如果没有开启则跳过此步) [bigdat原创 2020-06-06 08:34:29 · 4619 阅读 · 30 评论 -
HBase快速入门系列(8) | 一文教你HBase与Hive如何集成
此篇为大家带来的是HBase与Hive的集成。 目录一. 两者对比1. Hive2. HBase二. HBase与Hive集成使用1. 编译jar包2. 环境准备3. 测试案例14. 测试案例2 一. 两者对比 1. Hive (1) 数据仓库 Hive的本质其实就相当于将HDFS中已经存储的文件在Mysql中做了一个双射关系,以方便使用HQL去管理查询。 (2) 用于数据分析、清洗 Hive适用于离线的数据分析和清洗,延迟较高。 (3) 基于HDFS、MapReduce原创 2020-06-05 09:57:46 · 7615 阅读 · 29 评论 -
HBase快速入门系列(7) | 官方HBase-MapReduce与自定义
此篇为大家带来的是官方HBase-MapReduce与自定义。 目录1. 官方HBase-MapReduce1.查看HBase的MapReduce任务的执行2. 环境变量的导入2. 自定义HBase-MapReduce13. 自定义HBase-MapReduce2 通过HBase的相关JavaAPI,我们可以实现伴随HBase操作的MapReduce过程,比如使用MapReduce将数据从本地文件系统导入到HBase的表中,比如我们从HBase中读取一些原始数据后使用MapReduce做数据分析。原创 2020-06-03 10:35:18 · 5699 阅读 · 32 评论 -
HBase快速入门系列(6) | Hbase简单的API操作
此篇为大家带来的是Hbase简单的API操作。 目录1. 添加依赖2. HBaseAPI 1. 添加依赖 <dependencies> <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-server</artifactId> <version>1.3.1</versi原创 2020-06-01 12:58:53 · 4683 阅读 · 32 评论 -
HBase快速入门系列(5) | Hbase原理
此篇为大家带来的是Hbase的数据结构。 目录原创 2020-05-30 14:05:14 · 7963 阅读 · 35 评论 -
HBase快速入门系列(4) | 经此一文助你了解Hbase的数据结构
此篇为大家带来的是Hbase的数据结构。 目录原创 2020-05-29 09:14:19 · 3955 阅读 · 37 评论 -
HBase快速入门系列(3) | Hbase的shell基本操作
此篇为大家带来的是Hbase的shell操作。 目录1. 基本操作2. 表的基本操作 1. 基本操作 1. 进入HBase客户端命令行 [bigdata@hadoop002 hbase]$ bin/hbase shell 2. 查看帮助命令 hbase(main):001:0> help 3. 查看当前数据库中有哪些表 hbase(main):002:0> list 2. 表的基本操作 1. 创建表 hbase(main):003:0> crea原创 2020-05-27 11:41:58 · 5220 阅读 · 33 评论 -
HBase快速入门系列(2) | 一文带你安装Hbase(超级详细!!!)
> 大家好,我是不温卜火,是一名计算机学院大数据专业大二的学生,昵称来源于成语—`不温不火`,本意是`希望自己性情温和`。作为一名互联网行业的小白,博主写博客一方面是为了记录自己的学习过程,另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限,博客中难免会有一些错误出现,有纰漏之处恳请各位大佬不吝赐教!暂时只有csdn这一个平台,博客主页:[https://blog.csdn.net/qq_16146103](https://blog.csdn.net/qq_16146原创 2020-05-26 11:40:31 · 5438 阅读 · 30 评论 -
HBase快速入门系列(1) | Hbase的简单介绍
> 大家好,我是不温卜火,是一名计算机学院大数据专业大二的学生,昵称来源于成语—`不温不火`,本意是`希望自己性情温和`。作为一名互联网行业的小白,博主写博客一方面是为了记录自己的学习过程,另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限,博客中难免会有一些错误出现,有纰漏之处恳请各位大佬不吝赐教!暂时只有csdn这一个平台,博客主页:[https://blog.csdn.net/qq_16146103](https://blog.csdn.net/qq_16146原创 2020-05-26 10:21:42 · 6011 阅读 · 31 评论