![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 77
IQuicksandI
这个作者很懒,什么都没留下…
展开
-
Win下Eclipse提交hadoop法度失足:org.apache.hadoop.security.AccessCon...
在window下应用Eclipse进行hadoop的法度编写,然后Run on hadoop 后,呈现如下错误: 11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_0003 11/10/28 16:05:54 INFO mapred.JobClient: map 0% reduce 0% 11/10/转载 2012-08-13 15:55:40 · 1143 阅读 · 0 评论 -
hadoop的datanode无法启动
这一周在CentOS里安装了伪分布式的hadoop做测试,但没想到的是按网上的步骤配置后datanode节点怎么也没办法启动。后来通过分析启动日志后发现fs.data.dir参数设置的目录权限必需为755,要不启动datanode节点启动就会因为权限检测错误而自动关闭。提示信息如下: ARN org.apache.hadoop.hdfs.server.datanode.DataNode:原创 2012-08-15 09:19:10 · 1826 阅读 · 0 评论 -
Hadoop 解除 "Name node is in safe mode"
运行hadoop程序时,有时候会报以下错误: org.apache.hadoop.dfs.SafeModeException: Cannot delete/user/hadoop/input. Name node is in safe mode 这个错误应该还满常见的吧(至少我运行的时候是这样的) 那我们来分析下这个错误,从字面上来理解: Name node is in safe mo转载 2012-08-15 09:25:29 · 1013 阅读 · 0 评论 -
RedHat linux下安装hadoop 0.20.2, 并在windows下远程连接此hadoop,开发调试
1、hadoop 在 redhat linux下的安装过程 网上有很多讲授在windows下通过Cygwin安装hadoop的,笔者认为hadoop原始设计就是在linux下安装使用的,在windows下通过Cygwin安装也无非是模拟linux环境再在这个模拟的环境上装hadoop,既然要学hadoop就真枪实弹的在linux下安装来学习,但是要搞一台真正的linux系统对一般个人转载 2012-08-15 09:27:27 · 1239 阅读 · 0 评论 -
Win下Eclipse提交hadoop程序出错:org.apache.hadoop.security.AccessControlException: Permission denied: user=D
描述:在window下使用Eclipse进行hadoop的程序编写,然后Run on hadoop 后,出现如下错误: 11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_0003 11/10/28 16:05:54 INFO mapred.JobClient: map 0% reduce 0% 11/转载 2012-08-23 10:38:48 · 3599 阅读 · 0 评论 -
CentOS 安装 hadoop(伪分布模式)
在本机上装的CentOS 5.5 虚拟机, 软件准备:jdk 1.6 U26 hadoop:hadoop-0.20.203.tar.gz ssh检查配置 Linux代码 [root@localhost ~]# ssh-keygen -t rsa Generating public/private rsa key pair.转载 2013-01-15 22:31:41 · 1623 阅读 · 0 评论 -
HADOOP JAVA接口
从Hadoop URL 中读取数据 package org.urlcat; import java.io.InputStream; import java.net.URL; import org.apache.hadoop.fs.FsUrlStreamHandlerFactory; import org.apache.hadoop.io.IOUtils; public cla原创 2013-02-03 14:31:26 · 3528 阅读 · 0 评论