![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 63
ShiLuoHeroKing
这个作者很懒,什么都没留下…
展开
-
Hadoop2.5 的HA配置遇到的错误及解决办法
最近在学习hadoop的HA,遇到了一个很奇葩的问题,记录一下解决办法 问题1:多次格式化 namenode 后,出现 datanode 启动后自动关闭 出错原因:是因为和格式化 namenode 之前的文件发生冲突 解决办法:将 namenode 存放临时文件的目录下的文件全部删除,然后重新格式化 问题2:格式化成功以后,启动 journalnod原创 2017-03-28 12:39:13 · 848 阅读 · 0 评论 -
Hadoop2.X中Mapreduce,YARN等配置,启动和常见错误解决办法
本篇文章主要介绍一下 hadoop2.X 的启动的相关配置和启动过程常见错误的解决办法,废话不多少,下面开始按照官网的描述步骤开始介绍。1.在opt目录下建立两个目录,分别为 modules,software ,建立这两个目录的目的是为了方便管理软件的安装和卸载2.安装jdk ,由于本文中搭建的是hadoop2.X的环境,其中使用YARN,所以对jdk的版本有要求,最低为1原创 2017-03-21 09:20:36 · 1623 阅读 · 0 评论 -
CentOS6.5下实现时间同步的 ntp 服务的配置
CentOS6.5的ntp服务的配置首先需求如下:有三台服务器,分别为:hadoop01.shiluo.com 192.168.239.133 hadoop02.shiluo.com 192.168.239.134hadoop03.shiluo.com 192.168.239.135现在以hadoop01.shiluo.com原创 2017-03-25 17:40:53 · 3833 阅读 · 0 评论 -
hadoop环境搭建过程及搭建过程遇到的问题及解决的办法
看到网上大部分hadoop搭建教程,其中有一部分搭建过程不能成功,现在整理一下hadoop环境搭建基本步骤和搭建过程遇到的问题及对应的解决办法用到的工具如下:Linux:CentOS6.5JDK:jdk-8u101-linux-x64.tar.gz 对应的官网下载地址如下:http://eclipse.org/downloads/ 虚拟机:VMware Wor原创 2017-03-16 17:32:48 · 663 阅读 · 0 评论 -
Oozie环境的搭建
最近学习到一些大数据协同框架,其中遇到了一个工作流协同框架oozie,在安装oozie之前必须先安装好hadoop,Oozie环境搭建稍微比较麻烦一点,记录一下;首先准备资源:CDH版本的oozie: oozie-4.0.0-cdh5.3.6.tar.gz ExtJS的压缩包: ext-2.2.原创 2017-05-18 21:22:13 · 1281 阅读 · 0 评论