日复一日伐树的熊哥
专攻JAVAweb开发,大数据开发,机器学习领域的研发工作
展开
-
记一次Hbase2.1.x历史数据数据迁移方案
cdh6.3.2集群的hbase2.1.x的历史数据迁移,使用snapshot方式迁移历史数据,使用restore_snapshot方式恢复hbase历史表及数据原创 2023-10-13 11:20:26 · 1212 阅读 · 0 评论 -
cdh6.3.2集群在线主机扩容
cdh6.3.2集群主机在线扩容,cloudermanager添加主机,hadoop扩容原创 2023-10-08 16:28:00 · 374 阅读 · 0 评论 -
记一次生产环境cdh6.3.2集群yarn组件nodemanager节点down掉的事故分析
cdh6.3.2集群yarn组件的nodemanager不可用原因分析原创 2023-10-08 10:24:12 · 566 阅读 · 0 评论 -
Hive中count(1)结果为0的解决办法
执行count(1)或count(*)统计行数时,默认会从Hive的元数据库中查询 rowsNum 对应值作为结果返回。但是如果是使用加载数据文件load data的方式填充表数据,则hive元数据不会收集此统计信息,那么count时就会为0。也就是说通过insert的方式写入数据的表会更新hive元数据的rowsNum信息;第二种 对于类似于count(1)的基础查询不使用元数据中的统计信息,而是执行Job,即设置参数值为false。hive中执行count(1)函数,统计结果为0。原创 2023-08-24 17:02:00 · 1375 阅读 · 0 评论 -
Hadoop数据迁移distcp
Hadoop数据迁移distcp,hadoop高可用集群的数据迁移原创 2023-08-16 09:34:11 · 1465 阅读 · 0 评论 -
phoenix使用(一)之全局索引的使用
phoenix使用(一)之全局索引的使用原创 2023-05-04 15:33:20 · 811 阅读 · 0 评论