![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 94
Joshua_2019
这个作者很懒,什么都没留下…
展开
-
Hbase 线上集群 OutOfMemory 性能优化
Hbase OutOfMenory 性能优化原创 2022-07-01 13:32:08 · 819 阅读 · 0 评论 -
线上HBASE表数据离线迁移实战
使用export/import进行数据迁移由于线上服务器底层虚拟机要从VMWare切换为ZStack,需要对线上的HBASE集群数据进行离线迁移。使用HBase自带的Export/Import实现,这种方法可以支持网络不通的集群之间的数据迁移。迁移步骤是先利用Export将需要数据迁出的HBase表数据转换成文件存入HDFS中,然后通过get命令将HDFS上的文件下载到本地文件中,在将文件拷贝到需要数据迁入的集群上,通过put把拷贝的本地文件上传至目标集群的HDFS中,最后利用Import命令将目标集群H原创 2021-08-20 15:49:41 · 847 阅读 · 0 评论 -
CDH6.3安装问题汇总
CDH 安装/运维报错解决方案原创 2020-09-07 15:13:47 · 8783 阅读 · 1 评论 -
Cloudera Manager6.3.1+CDH6.3.2本地仓库方式搭建(超详细版)
CDH搭建准备工作CDH版本:6.3.1hadoop版本:3.1.1hbase版本:2.2.2安装前须知:CDH6.3官方文档CDH6操作系统版本对应官方文档CDH6数据库版本对应官方文档CDH6 JDK版本对应官方文档略过环节:安装JDK基础环境准备所有服务器都关闭防火墙查看防火墙状态-> firewall-cmd --state关闭防火墙-> systemctl stop firewalld.service所有服务器都关闭selinux->原创 2020-09-04 15:48:00 · 7161 阅读 · 9 评论 -
hadoop3 HDFS生产设计文档
HDFS生产设计该文档是基于Hadoop权威指南整理抽取的,更完整的细节可以阅读原书籍。HDFS架构图框架图参考文档:https://www.processon.com/view/5db807bbe4b0335f1e44d19b?fromnew=1NameNode节点NameNode节点为HDFS的管理节点,管理整个文件系统的命名空间,维护着文件系统数以及整棵树内的所有的文件和目录。这些信息以命名空间镜像文件和编辑日志文件这两个文件的形式永久保存在本地磁盘上。NameNode节点容错机制:如原创 2020-07-03 14:07:57 · 312 阅读 · 0 评论 -
HBASE2生产实践&性能优化
Hbase2.x版本生产实践&性能优化原创 2019-12-17 13:45:39 · 716 阅读 · 1 评论 -
HBASE2.2.2+hadoop3.1.3分布式集群搭建
以下安装基于已经安装了JDK的前提,如果还没有安装JDK需要自行安装。注意HBASE和Hadoop之间不是所有版本都互相兼容的,需要上官网查询版本之间的兼容关系!HBASE与Hadoop版本对应查询官网官网查询版本对比如下:Hadoop安装包下载地址HBASE安装包下载地址本教程安装使用的Hadoop版本是:hadoop-3.1.3,HBASE版本是:hbase-2.2.2安装Ha...原创 2019-10-29 17:39:31 · 3202 阅读 · 0 评论