记录一次hive drop table卡死的现象

最新推荐文章于 2022-11-16 14:23:12 发布
最新推荐文章于 2022-11-16 14:23:12 发布
阅读量360 收藏 1
点赞数
分类专栏： 大数据 文章标签： hadoop hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45657738/article/details/117112010
版权

mysql元数据库 set 字符 = latin1

问题解决后发现, 就是分区值出现了不该出现的非正规值

  1. 首先在TBLS里找到这张表 select TBL_ID from TBLS where TBL_NAME = ${tableName};
    在这里插入图片描述

  2. select * from PARTITIONS where TBL_ID = ${TBL_ID}
    在这里插入图片描述

  3. part_name 带有括号空格这种字符的都删掉 只保留字母

  4. 拿着part_id 去 PARTITION_KEY_VALS表里改成一样的分区值
    在这里插入图片描述

  5. 拿着sd_id 去 sds表里 hdfs路径改成一样的分区值
    在这里插入图片描述

不写是真记不住啊
关注
专栏目录
记录一次sqoop从oracle导入hive 卡在 map 0% reduce 0%
yy的博客
07-06 1134
问题 sqoop卡住 不报错 不结束 没有网络数据传入(通过nethogs(用来显示linux进城的网速)或者datax(另一个数据同步工具,会显示数据导入速度) ). 之前一直以为yarn内存哪里配置有问题. 后来发现. 数据人工脱敏.... sqoop import \ -Dorg.apache.sqoop.splitter.allow_text_splitter=true --connect jdbc:oracle:thin:@216.11.11.11:1521/test01 --u..
Hive drop table table_name一直卡死状态
热门推荐
BD_ZZQ的博客
11-18 1万+
用drop删除表的时候，一直处于卡死状态，也不报错，如下图所示 后来发现是Hive元数据存储编码问题，编码不能为utf8,所以我进入数据库看了一下MySQL的编码，如下图 所以要将编码改回来，方法：在MySQL配置文件中修改，并删除原有的数据库，新建一个一样的数据库
Hive drop table卡住的问题
weixin_30849591的博客
09-24 623
在hive中,show tables,create 等命令能正常执行,删除表drop table x时,会出现卡住的现象. 进入mysql, show variables like 'char%' 可以看到 按理说是正确的. 后面发现,是在建好hive数据库后,没有第一时间将character_set_database编码由utf8修改为latin...
mysql drop table 卡死
jieshenai的博客
06-12 1286
mysql drop 卡死的原因及分析
hive中drop table tab_name卡死
码大师的博客
11-19 966
最近在hive学习时遇到drop table时卡死，删除失败的情况。
Hive drop table table_name一直卡死解决办法
zhangjunli的博客
12-10 424
方法一： 替换mysql驱动包 方法二：修改mysql字符集（my.cnf） [client] default-character-set=latin1 [mysql] default-character-set=latin1 [mysqld] default-character-set=latin1 方法三：修改配置文件（hive-site.conf） <property> <name>hive.metastore.schema.verification
HIVE中DROP TABLE IF EXISTS
07-28
- *2* [记一次hive drop table 卡死的事故](https://blog.csdn.net/qq1226317595/article/details/84306519)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_...
hive 锁表，导致不能insert ，update 以及drop table 也不行，，解除hive锁表终极 解决方案！！！！
qq_27493503的博客
07-03 6479
    今天遇见hive插入的时候卡死不执行的问题   （直接上图）     起初我以为是hive启动报错，把日志调整到debugger级别查看发现该表被锁了。（PS:找了半天终于找到问题了）起初想着先把表删掉看看，结果表被锁定以后 不能drop卡死不往下执行，无论是drop 还是insert 或者 update于是各种网上搜索 ，hive怎么解除锁表（直接上图）先查看一下 是否锁表（肯定是锁了，...
Hive分区表伪字段分区时出现中文导致表删除(drop table)时hive卡死解决办法
qq_52241909的博客
06-25 1121
hive分区时分区字段产生中文导致删除表时卡住解决方法 在使用hive分区功能时生成的分区字段和分区目录取决于该分区字段的数据，由于该字段数据为中文汉字，则导致分区字段和分区目录中出现中文，造成删除该表令hive卡住运行不了后面的操作 WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different execution engine (
Hive drop table时候卡死-各种情况的解决方案(持续更新中)
微电子学与固体电子学-俞驰
05-27 3577
①jps中kill掉所有RunJar的进程 ②mysql中drop database hive ③hive --service metastore ④重启hive客户端
mysql drop table的时候卡住了
jason的专栏
09-11 7178
mysql> show processlist; +----+------+-----------------+-------+---------+------+----------+------------------+ | Id | User | Host | db | Command | Time | State | Info ...
MySQL DROP表卡死解决方案
Allenzyg的博客
11-13 7108
场景：同事要删除一张表，数据量3308条，数据量不大，但drop表，一直卡着。。。。。。 分析：MySQL如果频繁的修改一个表的数据，那么这么表会被锁死。造成假死现象。 解决： 1.首先执行： show full processlist; //列出当前的操作process，一般会看到很多waiting的process，说明已经有卡住的proces了，我们要杀死这些process！！ 2.再执行： kill processid; //processid表示process的id，比如kill..
Hive元数据库字符集问题，hive drop table卡死不动问题，comment注解以及字段中文乱码问题：
weixin_43530138的博客
08-07 436
hive的元数据metastore在mysql的数据库,不管是数据库本身,还是里面的表编码都必须是latin1 解决hive drop table卡死不动问题，comment注解以及字段中文乱码问题： 首先修改my.cnf文件 然后重启mysql 重启后删除原元数据库，创建新的元数据库 修改hive-site.xml文件中为： 注意是utf8而不是latin1 重启hive 进入mysql中hi...
hive执行某张表drop语句无效卡住的情况
Mr.Zheng的博客
07-14 1328
现象 删除一张表时，发现执行不报错，但是一直卡住。执行其他表查询或者删除语句正常，查看元数据库字符集正常。锁定问题在于单表，查询HIVE_LOCKS发现该表存在锁。复现原因，执行过程中关闭了session窗口（xshell），导致加锁未释放。（在hive操作过程中强制退出后，会导致锁表，并且unlock命令无效） 解决办法 此时可以去mysql的元数据库中解锁 mysql的元数据中解锁的命令是 不同版本可能表名不同，以下是2.3.x版本hive表 mysql>use hive; mysql&gt
Drop table 出现的问题
weixin_34318272的博客
04-01 620
由于应用下线，需要把数据库中相关应用的表删除，库中有一千多张表，事先已经将所有的表rename到test库中，drop table的脚步也已经准备好，所以接下来的工作本以为是很轻松的事情，但是在执行脚本的过程中，发现删除表的速度感觉有点慢，查看主机的负载也在挺高的，报警消息中thread running过高也出现了，发现大多数线程的状态是Opening ...
Hive:删除表卡死
Joseph25的博客
09-16 1952
在hive删除表的时候卡死删除不了 drop table XXX 有可能是锁机制造成的，查看是否有锁 show locks 发现有的表有锁有的表无锁，但还是删除不了 这里简单说一下：hive存在两种锁，共享锁Shared (S)和互斥锁Exclusive (X） 触发共享锁的操作是可以并发执行的 但是触发互斥锁，那么该表和该分区就不能并发的执行作业了。 如果有锁的先解锁 unlock table XXX 无锁的先把锁机制关闭，因为其他表有锁证明锁机制是开启的 set hive.suppor
故障分析 | DROP 大表造成数据库假死
ActionTech的博客
11-16 688
TiDB 是一款定位于在线事务处理/在线分析处理的融合型数据库产品，实现了一键水平伸缩，强一致性的多副本数据安全，分布式事务，实时 OLAP 等重要特性。同时兼容 MySQL 协议和生态，迁移便捷，运维成本极低。详细架构见：https://docs.pingcap.com/zh/tidb/stable/tidb-architecture从 TiDB 4.0 版本开始，TiUP 作为新的工具，承担着包管理器的角色，管理着 TiDB 生态下众多的组件，如 TiDB、PD、TiKV 等。
mysql执行truncate drop 时卡死问题解决
zoujian1991的博客
12-28 3124
1、show processList 找到状态正常的kill掉 2、select trx_id,trx_mysql_thread_id from information_schema.INNODB_TRX; 再kill相关进程
hive drop table
最新发布
03-13
Hive是一个基于Hadoop的数据仓库工具，用于处理大规模数据集。DROP TABLE是Hive中用于删除表的命令。当你不再需要某个表时，可以使用DROP TABLE命令将其从Hive中删除。 DROP TABLE命令的语法如下： ``` DROP TABLE [IF EXISTS] table_name [PURGE]; ``` 其中，table_name是要删除的表的名称。IF EXISTS是一个可选参数，如果指定了该参数，当要删除的表不存在时，Hive不会报错。PURGE也是一个可选参数，用于永久删除表及其数据，而不是将其移动到回收站。 注意：使用DROP TABLE命令删除表将不可逆转，所以在执行该命令之前，请确保你真的不再需要该表及其数据。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值