hive表数据误删恢复

最新推荐文章于 2022-11-14 17:28:24 发布
最新推荐文章于 2022-11-14 17:28:24 发布
阅读量317 收藏 1
点赞数
分类专栏： linux 文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/busy_programmer/article/details/119759256
版权

hive表或者表数据被误删,都会到垃圾站,可以到垃圾站中去恢复
一般的都会在这个路径下,可能会有不同
/user/hadoop/.Trash
只需要找到被删表名,将下面数据移到hive表对应的hdfs目录即可
如果说没找到,可能是因集群配置中没有开启

hive表被误删后如何恢复？
11-01 4440
1、首先去垃圾箱找到被删除的表数据 hadoop fs -du -h /user/用户名/.Trash/Current/user/用户名/warehouse; 2、把数据copy到原始的文件夹 hadoop fs -cp 垃圾箱/表名 原始文件夹/表名 3、修复分区 MSCK REPAIR TABLE 表名 4、验证数据 select * from 表名 limit 100; ......
Hive误删除后，如何恢复数据
Top5软件工程硕士，先后在京东、字节从事多年Java后端开发、实时和离线大数据开发
11-19 3695
原始数据:dfs -ls ns1/abc/sdk； ........... ........ns1/abc/sdk/2019-01-01 ........ns1/abc/sdk/2019-01-02 ........ns1/abc/sdk/2019-01-03 ........... 1 误删除：dfs -rm -r ns1/abc/sdk ，执行后，有提示 ns1/abc/sdk...
Hive恢复误删数据表
dymkkj的专栏
06-28 1146
Hive恢复误删数据表
[hive]hive加载本地数据,然后删除了本地数据也删除了表,这时可以在hdfs垃圾箱找到
胖胖的博客
03-23 819
上面的日期和想找的不相符,但是一层一层找下去,就找到想要的日期了
Hive数据误删除，一定条件下数据还原
承缘丶
08-23 699
误删除Hive表数据处理方法： 例如我有一个表，表名为：biao_ceshi，表的所属库是jwy_sdm，表的分区是etl_rkrq，我误删除了，如果时间来得及的话（一般自动清理回收站的时间是集群配置的，6小时等），恢复方法： 1、在Hdfs里面找删除过的数据文件（这个是华为的FI-Hive环境，其他可能略有不同）： hadoop fs -ls /user/ hadoop fs -ls /user/ Hive用户名/.Trash hadoop ...
Hive：从HDFS回收站恢复被删的表
大数据知识梳理
11-14 1910
Hive：从HDFS回收站恢复被删的表
hive误删数据表恢复
Ysuzuran的博客
09-10 3301
数据被update后想要找回原先的数据只知道HBASE可以通过回退版本号查找，oracle数据库可以基于时间查询as of timestamp语句的办法进行恢复数据，MySQL可以在MySQL server开启了binlog的情况下通过binlog2sql快速回滚（该方法适用于dml，不适用于DDL，如果是drop了一张大表，必须要在执行DDL前先备份老数据才能实现回滚），其他数据库遇到这种问题好像不能回退，但是好像可以通过数据库日志进行处理，具体怎么处理还在了解中。。。。。 如果hive里误删的数据表，恢
hive误删表，数据恢复
mACID_lys的博客
02-16 2600
本文删除的表时hive的分区表，parquet格式snappy压缩。有分桶 首先你要知道你的hdfs回收站是否开启 找到你的回收站里的刚才删除的hive表数据的文件，前提是你的表示drop的，而不是truncate的，truncate的表数据我暂时不知道能不能恢复 我们hive表删除的数据是在 标记1 的这个文件里（Current）这个需要看你的配置和个人的登陆服务器情况，但是一定不会在标记2这里 新建原表 CREATE TABLE `hive_na
小白篇(十八)：恢复Hive误删的表数据
belialxing的专栏
11-09 2921
我的原文地址： https://mp.weixin.qq.com/s?__biz=MzIxMzg5NzI4OQ==&tempkey=MTA4Nl9kOUdETjQzYnN4bHlENm5ybndmR2lYX2ZNanlYQ1VrM2VjbFVDN2VhZS0xMDBUZXVHNVVPLVg0THRYTEhKZEVXb0ZYX2dRU2RRdmVDbjJfYmNXTkxjUzA3RXVXeFpzQm81eTYxXzFxX3duVUlkdmJ0SlVka0RpZHVWSGVuZEtNejAwQTdmX
记录一次生产Hive表数据恢复过程
留歌__36的博客
02-17 1311
写在前面 有一张离线同步用到的表 源表新增了一个字段，所以对应的ods的表也要相应改变。 这张 表比较特殊，源表数据后端自己维护，只会保留最近几天的数据，对于历史数据是按天分区存放在ods的，所以对于历史数据的查询只能到数仓才行。目前ods的历史数据累计大于3亿多条。 公司一个小伙伴在做的时候，一开始不清楚这一点，然后直接把源表给干掉了，源表其实还是使用的外部表，他也直接把HDFS上的文件直接给删除了，然后重建了新的表。然后重新同步了数据，任务也能成功，但就是历史数据也没啦,呜呜呜~~ 这里其实有一个点：如
hive误删数据怎么找回
程老师的博客
06-09 1009
以内部表为例，外部表删除数据，只是删除元数据信息 新建表并插入数据： hive> CREATE TABLE IF NOT EXISTS `test.test8`( > `user_id` int, > `name` string, > `address` string); OK Time taken: 0.049 seconds hive> insert into table test.test8 > select 1 as
Hive--清除/删除Hive表数据,where条件
热门推荐
修行的博客
11-10 1万+
清除Hive表数据 hive删除表： drop table table_name; hive删除表中数据： truncate table table_name; hive按分区删除数据： alter table table_name drop partition (partition_name='分区名') 全表： 1、删除内部表中数据（保留表结构） truncate table 表名; 2、删除外部表中数据（保留表结构） hdfs -dfs -rm -r 外部表路径 drop tabl
hive修改表路径
fuyun6363的博客
10-31 5968
hive分为内部表和外部表，两种表修改路径方式不一样。 内部表 设置新的路径 alter table tb_table1 set location 'hdfs://cluster/hive/warehouse/test.db/tb_table2 移动表的文件 hdfs dfs -mv /hive/warehouse/test.db/tb_table1 /hive/warehouse/test.db/tb_table2 外部表 因为外部表删除表并不会删除文件，所以可以先删除表 drop table tab
误删hive表如何恢复
张不帅
02-16 3532
CDH环境,已配置回收站,配置回收站默认日期保存为一天 失误将hive表数据删除,删除的数据移动到了回收站中,位于 /user/hive/.Trash/删除日期XXX/hive/warehouse数据库名.db/表名
 先查看表名文件中是否是删除的表 hadoop fs -ls /user/hive/.Trash/Currerrt/user/hive/warehouse/数据库据库名.db | ...
hive恢复drop table数据
haijiege的专栏
11-02 6823
hive 中使用truncate命令将表截断的话，它是不会进回收站的，是没办法恢复的。这个跟oracle truncate有点类似的。        恢复在hive中通过drop table删除的数据文件就是将hdfs dfs -rm删除掉的文件进行恢复，只需要hdfs dfs -mv将文件从回收站中搬过来就行，我就先使用这个方法，但是效果不佳，执行select count(*) from ta...
Hive外部表误删后的恢复
需求是无耻的
03-01 4217
Hive中的外部表是比较安全的一种数据管理方式，有时也会误删使用外部表有一个很好的好处，如果不小心将表误删了，只需要重新创建外部表然后使用下面的语句修复分区即可。MSCK REPAIR TABLE table_name;...
hive数据恢复
九师兄
12-28 2026
truncate删除hive的表能恢复吗 0: jdbc:hive2://localhost:10014/default> create table test2 (id int,name string)row format delimited fields terminated by ','; 0: jdbc:hive2://localhost:10014/default> loa...
hive修复表数据
weixin_35780812的博客
12-15 4387
由于之前已经导入数据，之后查询不到 可以使用msck repair table xxxxx命令修复！
truncate误删数据恢复hive
最新发布
02-12
### Hive 中 Truncate 命令误删除数据后的恢复方法 对于通过 `TRUNCATE` 命令清空的 Hive 表，由于该命令会直接清除表中的所有数据而不会移动到回收站，因此常规情况下这些数据无法像 DROP 的表那样容易恢复[^1]。 然而，在某些特定条件下仍有可能尝试恢复： #### 尝试从 HDFS 日志中查找残留数据 虽然 `TRUNCATE` 不会将旧版本的数据放入垃圾箱，但在极少数情况下，部分未及时清理的日志文件可能还保存着被截断之前的数据副本。这取决于具体集群配置以及日志保留策略[^4]。 ```bash hdfs dfs -ls /path/to/table/directory/_logs/ ``` 请注意上述路径需替换为实际存储位置，并且这种方法成功率较低。 #### 利用备份机制 如果所在环境启用了自动定期全量或增量备份，则可以从最近一次完整的备份集中提取丢失的信息并重新导入至当前数据库实例内[^2]。 #### 数据库快照功能（适用于支持此特性的发行版） 一些企业级大数据平台提供了更高级别的保护措施如时间点恢复(PITR)，允许管理员回滚到指定历史时刻的状态从而挽救意外损失的内容[^3]。 尽管存在以上几种理论上的解决方案，但针对由 TRUNCATE 导致的数据遗失情况而言，最有效的预防手段始终在于事前准备——即建立完善的事先防范体系，包括但不限于启用事务管理、设置合理的权限控制政策等。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值