设置HBase的TTL

最新推荐文章于 2022-07-16 18:44:40 发布
最新推荐文章于 2022-07-16 18:44:40 发布
阅读量455 收藏
点赞数
分类专栏： HBase 文章标签： 大数据

建表时可以设置TTL过期时间：create 'tableName',{NAME=>'cf',TTL=>超时时间秒为单位}

 

后期修改

首先停表：disable 'tableName'

然后修改TTL失效时间：alter 'tableName',NAME => 'cf', TTL => 超时时间秒为单位

恢复表：enable 'tableName'

查看表元数据：describe 'tableName'

gxl1989225
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
记一次hbase的TTL功能不生效问题
trmplarguard的博客
06-30 1213
最近接手了一个的hbase和hadoop的小集群，被告知hbase有TTL不生效的问题（磁盘未释放），做个记录 hbase版本1.2.7 hdfs版本2.7.5 问题描述： hbase中所有的表都配置了TTL，然而hdfs使用量依然不断增加，直至磁盘打满，datanode全挂。 解决过程： 1、在我负责接手这部分服务后，了解到之前伙伴的处理方式简直简单粗暴，每次出现问题，直接rm -rf datanode数据目录下的 BP-XXXXX目录。。。终于知道hdfs为什么会有9000+个corrupt
读者来信 | 设置HBase TTL必须先disable表吗？（已解决）
weixin_42047967的博客
04-06 945
今日有朋友加好友与我探讨一些问题，我觉得这些问题倒挺有价值的；于是就想在本公众号开设一个问答专栏，方便技术交流与分享，专栏名就定为：《读者来信》。如遇到本人能力有限难以解决的问题，该贴将会被转发至我的资源圈寻求大佬们出手帮助，并附上提问者微信二维码。也欢迎大家在留言区积极探讨解决方案~ 来信人：黄*伟 小猿提问 如果我用Spark处理文件写进HBase，文件按日期每天增量下发，如果只想在HB...
HBase修改表属性
云原生devsecops
07-20 1999
登陆hbase shell 1.停用相关表 > disable ‘ANALYSIS’ 2.修改TTL属性（修改为永久有效） > alter "ANALYSIS",NAME=>'INFO',TTL=>'2147483647' 3.启用相关表 > enable ‘ANALYSIS’ 4.验证表 >desc ‘ANALYSIS’ 注意查看TTL值是否为FOR...
Hbase设置TTL
doujiayun3939的博客
11-16 1621
TTL缩写Time To Live，即生存期。TTL设置了一个基于时间戳的临界值， 内部的管理会自动检查TTL值是否达到上限，在major合并过程中时间戳被判定为超过TTL的数据会被自动删除。 TTL参数的单位是秒，默认值是Integer.MAX_VALUE，即2^31-1=2 147 483 647 秒，大约68年。使用TTL默认值的数据可以理解为永久保存。   desc "tt1"   查...
Hbase命令设置TTL/编码设置TTL
Happywzy~的博客
11-12 3517
Hbase关于TTL ColumnFamilies可以以秒为单位来设置 TTL（Time To Live）长度，一旦达到到期时间，HBase 将自动删除行。 设置 hbase.store.delete.expired.storefile 为 false 将禁用此功能。将最小版本数设置为 0 以外的值也会禁用此功能。 也支持设置时间以每个单元为基础生存。单元TTL 是使用突变 setTTL 作为突变请求（例如：Appends、Increments、Puts）的属性提交的. 单元 TTL 以毫秒为单位而不是秒
HBase中的TTL与MinVersion的关系
zhangxiping
03-23 500
如果HBase中的表设置了TTL的时候，MinVersion才会起作用。 a）MIN_VERSION > 0时： Cell至少有MIN_VERSION个最新版本会保留下来。这样确保在你的查询以及数据早于TTL时有结果返回。 b）MIN_VERSION = 0时： Cell中的数据超过TTL时间时，全部清空，不保留最低版本。 ...
Hbase的TTL字段超时设置测试
热门推荐
wulantian的专栏
11-11 3万+
在工作中，很多时候需要对表字段进行限定，例如限定一列的
hbase生存期TTL的设置
浅汐
10-11 2756
TTL简述 TTL缩写Time To Live，即生存期。TTL设置了一个基于时间戳的临界值， 内部的管理会自动检查TTL值是否达到上限，在major合并过程中时间戳被判定为超过TTL的数据会被自动删除。 TTL参数的单位是秒，默认值是Integer.MAX_VALUE，即2^31-1=2 147 483 647 秒，大约68年。使用TTL默认值的数据可以理解为永久保存。 设置TTL 1、查看...
Hbase的数据清理之TTL设置以及MinVersion所起到的重要影响
czs1130的博客
04-10 6730
1. 前言笔者刚从大数据跳槽到了数据挖掘，有很多过去操作大数据的经验还是想记录下来吧。其中印象比较深刻的还是Hbase的磁盘一直满，然后清理用的TTL设置，需求就是需要自动删除n天前的hbase数据，比起写代码定时删除来说还是用自带的TTL（Time To Live）比较方便一些，为此也是做了很多实验以及发现了MinVersion这个机制。2.TTL设置首先熟悉hbase的人都知道hbase的每个...
HBase TTL时间戳列族的使用技巧
在HBase中，TTL（Time-To-Live）时间戳列族是一项重要特性，用于设置数据存储在HBase中的过期时间。 ## 1.1 什么是HBase TTL时间戳列族 在HBase中，每个列族都可以设置TTL时间戳，即在写入数据时，可以为每条记录...
hbase 总结
weixin_45401571的博客
07-16 4805
hbase 知识点总结
hbase java创建表时设置TTL
u012447842的博客
01-15 3139
hbase java创建表时设置TTL ColumnFamilies 可以以秒为单位来设置 TTL（Time To Live）长度，一旦达到到期时间，HBase 将自动删除行。 设置 hbase.store.delete.expired.storefile 为 false 将禁用此功能。将最小版本数设置为 0 以外的值也会禁用此功能。 java创建表时设置TTL hcd.setTimeTo...
HBase中的TTL应用
zhangzywhu的专栏
10-10 8030
HBase中每个数据存储在一个CELL中，HBase可以设置每个CELL保存的最大version数，还可以设置version保存的最大时间TTL(Time To Live)， 生存期(TTL)设置了一个基于时间戳的临界值，内部的管理会自动检查TTL值是否达到上限，超过TTL的值会被删除；TTL参数设置的单位为秒，默认值 是Integer.MAX_VALUE,即2147483647秒。使用默认值
HBase 修改 TTL 属性以释放空间
hochoy的博客
09-13 1万+
40. Time To Live (TTL) ColumnFamilies can set a TTL length in seconds, and HBase will automatically delete rows once the expiration time is reached. This applies to all versions of a row - even the ...
HBase 修改TTL 属性释放空间
u010027484的博客
07-11 2926
HBase 修改 TTL 属性，释放空间 1.停用相关表 hbase(main):010:0> disable ‘ResourceURL’ 0 row(s) in 1383.2350 seconds 2.修改TTL属性 hbase(main):015:0* alter ‘ResourceURL’, {NAME=>’value’,TTL=>’2592000′} Updating
hbase 设置TTL释放空间
vbaspdelphi的专栏
02-08 3707
关于这个问题，经过查找，设置ｔｔｌ是必须的alter "test", "value" xxxx major_compact # 大合并但是上面的操作虽然可以hdfs dfs -u /hbase/data/default/但是，物理空间的磁盘空间还是得不到释放参考以下：http://grokbase.com/t/hbase/user/143kabfd8f/after-drop-big-hbase-ta
java通过脚本修改opentsdb的hbase表的TTL
guoqu1919的博客
03-01 813
1、首先了解hbase的ttl是如何修改的 hbase shell 进入habse内， 然后list查看opentsdb对应的hbase中的表： disable ‘tsdb’ 停用表 alter ‘tsdb’ , {NAME=>‘t’,TTL=>‘1296000’} 修改表的ttl（单位s） describe ‘tsdb’ 查看表的属性 exit 退出habse shell 2、然后编写linux脚本 vi habse-oneyear.sh （ttl设置为一年的脚本，及ttl等于3153600
hbase ttl 什么时候删除数据
最新发布
12-23
在HBase中，每一条数据都可以设置一个TTL值，当数据存储超过了这个TTL值之后，系统会自动将其标记为过期数据，但并不会立即从硬盘中删除。 过期数据会在后续的minor compaction或major compaction过程中被清理掉。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值