Hadoop
文章平均质量分 95
DazzlingTiger
人生没有地图、
我们一路走、一路被辜负、
一路点燃希望、一路选择、
一路寻找答案
展开
-
配置使用CM5安装CDH5.x的yum源
配置使用CM5安装CDH5的yum源下载必要的软件包:1、下载需要的CM5版本:http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/ http://archive.cloudera.com/cm5/redha原创 2016-09-07 14:16:27 · 1113 阅读 · 0 评论 -
Hadoop集群服务器更换IP,集群mngt服务无法使用
1、由于网络原因,整套Hadoop集群换了新的ip地址,mngt监控服务启动时报错: 2015-11-26 10:40:44,045 WARN [com.mchange.v2.async.ThreadPoolAsynchronousRunner$PoolThread-#2:resourcepool.BasicResourcePool@18原创 2016-09-07 16:51:41 · 2459 阅读 · 0 评论 -
Hadoop NN备份与恢复
Hadoop NameNode的备份与恢复一、同时备份NN,以及SNN关闭集群对NN,SNN备份(最后一次备份时间越近,丢失的数据越少)。1、备份前,需要确保NameNode,SecondanryNameNode进程全部停止。2、cd /dfs/nn tar -cvf /root/nn_backup_data.tar .原创 2016-09-07 17:10:32 · 1618 阅读 · 0 评论 -
重建hdfs后,Hbase无法使用
原因分析:重建hdfs后,Hbase注册到原hdfs的信息被清除,而zookeeper仍保留了Hbase的旧的注册信息。导致在新的hdfs找不到原来的Hbase信息而报错。解决方案:将zookeeper注册的旧的Hbase信息清除,重新启动Hbase服务。2月 21, 凌晨5点23:59.125 FATAL org.apache....原创 2016-09-07 17:22:02 · 1313 阅读 · 0 评论 -
关于Cloudera Hadoop的安装(CentOS)- 官文标注(待完成)
CDH 5 and Cloudera Manager 5 Requirements and Supported VersionsIn an enterprise data hub, Cloudera Manager and CDH interact with several products such as Apache Accumulo, Apache Impala (incubatin原创 2017-06-19 11:17:04 · 1936 阅读 · 0 评论 -
windows环境搭建Hadoop的本地yum源+httpd-2.2.32-win64.zip
1、借助httpd-2.2.32-win64.zip工具(不限制版本,以此为例)下载该工具点击下载httpd2、配置conf/httpd.conf,解压缩路径E:\httpd-2.2.32-win64\Apache22、httpd.conf配置## This is the main Apache HTTP server configuration file. It c原创 2017-08-21 15:08:39 · 804 阅读 · 0 评论 -
为DataNode节点批量分区并格式化脚本
===========================================================================================================一、重要说明: 使用这个脚本格式化,或者分区时候,需要做sleep,给出系统的执行保存的时间。否则会导致格式化失败报错信息如下:WARNING: Re-reading原创 2017-10-19 16:10:12 · 314 阅读 · 0 评论