hbase
介绍hbase的一些知识
火成哥哥
这个作者很懒,什么都没留下…
展开
-
电信项目总结
一、项目整体架构二、数据生产模块介绍1、数据字段2、数据产生方法通过编写 java 代码,模拟生产数据。然后将代码打成 jar 包,放在服务器上,运行 jar 包,将数据存储在文件中。三、数据采集模块介绍1、配置 kafka,启动 zookeeper 和 kafka 集群。2、创建 kafka 主题。3、启动 kafka 控制台消费者(此消费者只用于测试使用)。4、配置 fl...原创 2020-05-05 21:08:46 · 1588 阅读 · 0 评论 -
HBase基础API
一、环境在 IDEA 中创建一个 maven 工程,添加依赖,pom 文件如下: <!--阿里云搭建了一个国内镜像http://maven.aliyun.com,跑起来速度很快,可以进行配置--> <repositories> <repository> <id>nexus-aliyun</id...原创 2020-03-03 21:22:24 · 203 阅读 · 0 评论 -
启动 HBase 出现 Java HotSpot(TM) 警告
1、警告日志[test@hadoop151 ~]$ start-hbase.sh starting master, logging to /opt/module/hbase-1.3.1/logs/hbase-test-master-hadoop151.outJava HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=...原创 2020-03-02 10:17:02 · 447 阅读 · 0 评论 -
HBase底层原理
一、HBase 架构原理1、StoreFile保存实际数据的物理文件,StoreFile 以 HFile 的形式存储在 HDFS 上。每个 Store 会有一个或多个 StoreFile(HFile),数据在每个 StoreFile 中都是有序的。2、MemStore写缓存,由于 HFile 中的数据要求是有序的,所以数据是先存储在 MemStore 中,排好序后,等到刷写时机才会刷写到...原创 2020-02-28 14:47:03 · 578 阅读 · 0 评论 -
在 xshell 中使用 hbase shell 无法退格(Backspace)和删除(Delete)
1、问题由来在 hbase shell 下,误输入的指令不能使用 backspace 和 delete 删除,这是一件极其难受的事情!!!2、解决办法(1) 点击 xshell 中文件,选择属性(2) 选择键盘,修改配置都修改为 ASCII 127...原创 2020-02-28 09:51:45 · 1206 阅读 · 0 评论 -
HBase安装部署
一、提前准备1、Zookeeper 部署保证 Zookeeper 集群的正常部署并启动2、Hadoop 部署保证 Hadoop 集群的正常部署并启动二、HBase 的安装1、解压 HBase 到指定目录[test@hadoop151 software]$ tar -zxvf hbase-1.3.1-bin.tar.gz -C /opt/module/2、修改 HBase 配置文件...原创 2020-02-27 23:18:46 · 186 阅读 · 0 评论 -
HBase简介
1、HBase 定义HBase 是一种分布式、可扩展、支持海量数据存储的 NoSQL 数据库。2、HBase 逻辑结构3、HBase 数据模型(1) Name Space命名空间,类似于关系型数据库的 DatabBase 概念,每个命名空间下有多个表。HBase有两个自带的命名空间,分别是 hbase 和 default,hbase 中存放的是 HBase 内置的表,default 表...原创 2020-02-27 19:37:27 · 507 阅读 · 0 评论