Hadoop
文章平均质量分 93
mythsc
程序猿一枚,喜欢新技术。
展开
-
phoenix 报错 java.lang.NoClassDefFoundError: org/apache/htrace/Trace 解决方法
在使用cdh6.0时,由于需要对表中字段建立索引,需要引入phoenix,但cloudera官方并没有出配套的phoenix软件,需要自己进行配置。cdh6安装配置phoenix参考教程:CDH的 Phoenix、hbase操作按照上述教程配置完phoenix后,启动报错:Error: org.apache.phoenix.exception.PhoenixIOException: org.apache.hadoop.hbase.DoNotRetryIOException: java.lang.NoCl原创 2020-06-17 19:10:42 · 2837 阅读 · 0 评论 -
cdh 6哈希验证失败解决方法
当安装cdh 6,使用本地搭建的parcel时,出现了哈希验证失败的问题:查看了parcel的sha值,与官网的一致,没有问题:#parcel sha值[root@localhost bigdata]# sha1sum CDH-6.0.0-1.cdh6.0.0.p0.537114-el7.parcelde86cc42380f073f4906801913d7083b39e46db7 CDH-6.0.0-1.cdh6.0.0.p0.537114-el7.parcel#sha文件里的值[root原创 2020-06-15 15:47:20 · 3573 阅读 · 3 评论 -
centos7 安装 cdh5 集群超详细教程
系统环境:主节点: master 10.18.1.117从节点: slave1, slave2, slave3 10.18.1.118, 10.18.119, 10.18.1.120一、准备工作,系统环境搭建预先准备工作:CDH 系统优化之关闭透明大页面及设置swappinesshttp://blog.csdn.net/post_yuan/article/details/549675081. 关闭透明大页面首先查看透明大页是否启用,[always] never表示已启用,always [原创 2020-06-11 17:12:35 · 761 阅读 · 1 评论 -
linux 安装 cdh5 详细步骤
官方指导手册:https://www.cloudera.com/documentation/enterprise/latest/topics/introduction.html一、准备工作,系统环境搭建预先准备工作:CDH 系统优化之关闭透明大页面及设置swappinesshttp://blog.csdn.net/post_yuan/article/details/...原创 2018-09-11 15:19:15 · 1639 阅读 · 0 评论 -
hadoop大数据集群搭建详细教程
#程序员薪资揭榜#你做程序员几年了?月薪多少?发量还在么?>>> ...原创 2020-05-27 11:54:00 · 521 阅读 · 1 评论 -
HBase 2.0 之修复工具 HBCK2 运维指南
一、概述目前社区已经发布了HBase的2.0版本,很多公司都希望去尝试新版本上的新功能,但是不得不面对的问题就是当集群出了问题应该如何解决。在之前的HBase版本中,我们可以依赖hbck来帮助检查问题和修复问题,在新的版本上我们应该如何去处理呢?HBASE-19121[1] 给了我们答案——HBCK2。HBCK2目前发布了1.0版本,还在一直开发中,感兴趣的同学看看这个issue。二、why HBCK2?由于之前的hbck(hbck-1)是会直接去向region server或者hdfs发送请求进转载 2020-05-27 17:31:48 · 1537 阅读 · 0 评论 -
Hadoop 3.0 伪分布式安装配置教程 (基于Centos)
截止到19年,Hadoop 最新的版本已经出到 3.1.1 版本了,下面就以 该版本为例,详细分析分布式安装的步骤。Hadoop 有三种安装方式,包括:1. 单机模式2. 伪分布式模式3. 分布式模式零、准备工作准备好需要安装 Hadoop 的机器,本文使用的是 4 台 centos 机器,分别是 node1, node2, node3 和 node4,需要预先准备好 Hado...原创 2019-01-04 17:43:40 · 475 阅读 · 0 评论