HBase 之 TableDescriptors FSTableDescriptors HTableDescriptor HColumnDescriptor

最新推荐文章于 2023-04-04 23:53:11 发布
最新推荐文章于 2023-04-04 23:53:11 发布
阅读量6.1k 收藏 2
点赞数
分类专栏： hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/asdfasdfsadffds/article/details/38424031
版权
本文详细介绍了HBase中HColumnDescriptor的属性，包括BlockSize、compressionType、DataBlockEncoding等，以及HTableDescriptor的重要设置，如Readonly、MaxFileSize和MemStoreFlushSize。同时提到了FSTableDescriptors在表元数据管理中的作用，它是连接FileSystem和表的桥梁。
摘要由CSDN通过智能技术生成

1、 HColumnDescriptor  描述列族的属性信息，我们看一些那些属性可以设置


具体讲一下每个属性的意义

BlockSize   写storefile/hfile的时候最小存储单元blok的大小、默认64k ，此Block 不同于hdfs Block的概念不要混淆

compressionType  压缩类型、主要有LZO  SNAPPY 

EncodeOnDisk 设置是否在除了cache外硬盘上做encode

DataBlockEncoding  提供访问data block的编码算法 ，主要有 FAST    FAST_DIFF   PREFIX 

CompactionCompression  对于列族major_compaction 的压缩类型、同 compressionType

InMemory   当某些family特别重要时，可以将它的in-memory设为true，单独使用一个缓存队列，保证cache的优先使用 (这个后续在缓存中讲解)

KeepDeletedCell ?

TimeToLive [TTL]  cell 存

最低0.47元/天 解锁文章
_牧童
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hbase之地震数据分析系统
08-08
选题意义：地震是一种常见的自然灾害，可以通过相关技术进行监测与预报，在互联网...1、数据储存：Hbase 2、数据分析：Phoneix 3、数据管理：SpringBoot+MyBaties+JSP+Layui 4、数据可视化：SpringBoot+echart可视化
提示HColumnDescriptor过期 hbase 2.05以上等使用 3.0后就弃用了Java客户端创建表
qq_39214610的博客
05-11 5712
由于启动程序提示 HColumnDescriptor过期 等 我有强迫症， 花了一小时去官网找答案 希望能为遇到相同问题小伙伴节约时间吧 我也是初学大数据 我是先下载 的源码 /** * HTableDescriptor contains the details about an HBase table such as the descriptors of * all the co...
Hbase的学习笔记（3）
weixin_45866849的博客
02-26 795
Hbase的学习笔记（3） 本次主要学习Hbase与Java的配合使用，即通过Java语言完成对Hbase表的增删改查。 1. 所需依赖jar包 <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-client --> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-
eclipse 实现 HBase java API
博樽
03-15 2297
HBase Java API 核心类介绍、创建表
java HTableDescriptor类解析
鸭梨的博客
10-25 2496
HTableDescriptor主要用于和Hbase表相关的操作. 继承了WritableComparable接口,就是说可以序列化以及比较 public class HTableDescriptor implements WritableComparable<HTableDescriptor> 如何创建一个表呢?看构造函数, public HTableDescriptor(final TableName name) { super(); setName(name); }
HBase Java API之TableDescriptorBuilder，ColumnDescriptorBuilder创建表、列族
shiaiao的博客
12-07 3937
HBase用Java API创建表背景实现HBase用Java API创建表、列族 背景 HBase 2.2.2 Jave API 中使用HTableDescriptor与HColumnDescriptor时提示不推荐使用了，并且在3.0.0版本将删除，而是使用TableDescriptorBuilder和ColumnFamilyDescriptorBuilder 实现HBase用Java API创建表、列族 import org.apache.hadoop.conf.Configuration; impo
hbase访问方式之javaapi共3页.pdf.zip
10-29
本资料"《hbase访问方式之javaapi共3页.pdf》"虽只提及3页内容，但我们可以深入探讨HBase Java API的关键知识点。 首先，HBase的Java API主要由`org.apache.hadoop.hbase`和`org.apache.hadoop.hbase.client`两个包...
大数据HBase之入门进阶
06-10
HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。本次课程适合HBase入门的学员，课程首先介绍了什么是HBase ，...
大数据技术之HBase
07-26
大数据技术之HBase 大数据技术之HBase是当前大数据处理领域中的一种重要技术，旨在解决关系型数据库在大规模数据处理中的性能瓶颈问题。HBase作为一种NoSQL数据库，具有海量存储、列式存储、极易扩展等特点，广泛...
HBase源代码阅读-6-数据逻辑模型HTableDescriptor
run_xiao
09-18 777
6.数据逻辑模型HTableDescriptor             HBase中表结构由HTableDescriptor描述(包括HColumnDescriptor),对表的新增\修改\删除操作在接口HMasterInterface中定义,而该接口由HMaster实现             (1)HTableDescriptor包含：                 表名,byte[...
hbase java操作api - HBaseAdmin，HTable，HTableDescriptor，Put，Get等类说明(文档)
小哇
09-11 2131
一、 几个主要 Hbase API 类和数据模型之间的对应关系： 1、 HBaseAdmin 关系： org.apache.hadoop.hbase.client.HBaseAdmin 作用：提供了一个接口来管理 HBase 数据库的表信息。它提供的方法包括：创建表，删除表，列出表项，使表有效或无效，以及添加或删除表列族成员等。 2、 HBaseConfiguration 关系： org.apache.hadoop.hbase.HBaseConfiguration 作用：对 HBase 进行.
flink1.14 sql基础语法（二） flink sql表定义详解
最新发布
qq_44665283的博客
04-04 3333
flink1.14 sql基础语法（二） flink sql表定义详解
【HBase】19-HBaseAdmin
通往神秘的道路的专栏
12-12 2659
客户端提供了API的模式来管理集群,与 RDBMS中的DDL相比—客户端提供的具有管理功能的API更像是DML。 HBaseAdmin提供了建表、创建列族、检查表是否存在、修改表结构和列族结构和删除表等功能。下面我们对这些功能按操作关联性分组进行介绍。 1、基本操作 使用管理的API需要首先实例化 HBaseAdmin类,构造函数如下 HBaseAdmin(Configuration co...
HBase分享系列（3）--读取细节
Haidi_Elisa的专栏
07-13 233
一、布隆过滤器 1、检索机制 2、优点 （1）节省存储空间 （2）节省定位时间 3、缺点 （1）有误差 （2）有删除困难 布隆过滤可以每列族单独启用。 使用 HColumnDescriptor.setBloomFilterType(NONE | ROW | ROWCOL) 对列族单独启用布隆。 Default = NONE 没有布隆过滤。 对 ROW，行键的哈希在每次插入行
HBase数据压缩 Column family Compress & Data Block Encoding
microGP的专栏
07-22 1277
说到HBase数据压缩，在HBase中有两种方式可以达到该目的，一个就是column family的compress，HBase支持none/snappy/lzo/lz4/gz等几种压缩方式来压缩数据，最后降低数据总量的大小；另一个是data block 的encoding，通过对data block中的KeyValue中key的相同部分进行处理来减少存储的占用，目前支持prefix/diff/fast diff/prefix tree等几种方式来实现data block 的encoding，另外，...
hbase的API实现
y果子
04-23 211
一、实践内容 用java语言在hbase数据库中创建表，并完成增删改查等基本操作。 二、实践代码 （1）创建表 public static void createTable(String tableName, String... columnFamily) throws MasterNotRunningException, ZooKeeperConnectionException, IOEx...
HBase——命令操作
温一杯酒的博客
04-23 631
一、Hbase shell 通用命令 status: 提供HBase的状态，例如，服务器的数量。 version: 提供正在使用HBase版本。 table_help: 表引用命令提供帮助。 whoami: 提供有关用户的信息。 数据定义语言 这些是关于HBase在表中操作的命令。 create: 创建一个表。 list: 列出HBase的所有表。 disable: 禁用表。 is_disable...
hbase里在已有表中添加一个列族
热门推荐
HYDMonster的博客
04-19 2万+
在看了书上API后我以为添加一个列族是这样的public void addAFamily(String tableName,String familyName) throws IOException{        init();        Table table=connection.getTable(TableName.valueOf(tableName));        HTableD...
hbase之shell命令java实现(二)--------表的操作
reddy_Hu的博客
07-17 452
1.建表 表名 列族 * 1)单列族 * 2)多列族 * 3)预分region表 * 4)在DOIT名称空间下建表 DOIT:tb_stu 2 禁用表 是否禁用 启用 是否启用 3 表是否存在 4 删除表 5 修改表结构 列族 * 5.1 modifyColumnFamily只能修改已经存在的列族 * 5.2 admin.modifyTable(tableDescriptor); 参数是一个tableDescriptor描述对象 添加列族 删除列族 覆盖列族 1.建立表格 .
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值