![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 69
偷师网络
我要自学成才!
展开
-
hadoop_shell操作和javaAPI操作
注:以下部分内容来自本人博客园随笔,地址:http://www.cnblogs.com/870386641drh/p/4262593.htmlpackage com.drh.hdfs;import java.io.FileInputStream;import java.io.FileNotFoundException;import java.io.FileOutputStream;i原创 2015-02-03 10:20:07 · 529 阅读 · 0 评论 -
org.apache.hadoop.mapred.FileAlreadyExistsException
执行自己编写的wordcount出的错,命令:hadoop jar WC.jar cn.drh.hadoop.mr.wc.WordCount /mrexample/wc /mrexample/result15/02/02 10:50:26 ERROR security.UserGroupInformation: PriviledgedActionException as:drh (aut原创 2015-02-02 10:58:04 · 2858 阅读 · 0 评论 -
hadoop2.2.0伪分布式搭建
1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.68.0 子网掩码:255.255.255.0 -> apply -> ok 回到windows --> 打开网络和共享中心 -> 更改适配器设置 -> 右键原创 2015-02-03 09:43:35 · 456 阅读 · 0 评论 -
hadoop(mapreduce):java.lang.NoSuchMethodException: ******Mapper.<init>()
15/02/02 13:36:23 INFO mapreduce.Job: Task Id : attempt_1422844968628_0014_m_000000_0, Status : FAILEDError: java.lang.RuntimeException: java.lang.NoSuchMethodException: cn.drh.hadoop.mr.wc.WordCount原创 2015-02-02 13:52:16 · 4600 阅读 · 0 评论 -
Hadoop2.4.1集群搭建
本文搭建Hadoop2.4.1分布式系统,包括NameNode ,ResourceManger HA,忽略了Web Application Proxy 和Job HistoryServer。 一概述(一)HDFS1)基础架构(1)NameNode(Master)命名空间管理:命名空间支持对HDFS中的目录、文件和块做类似文件系统的创建、修改、删除、列原创 2015-02-27 13:02:41 · 3435 阅读 · 0 评论 -
hadoop集群中部分datanode有进程但不是active
发现drh02是有问题的 并且drh03没有 (drh02和drh03datanode的cid相同)org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.protocol.UnregisteredNodeException): Data node DatanodeRegistration(192.168.68原创 2015-03-16 17:08:21 · 1311 阅读 · 1 评论 -
hadoop2.4.1+hbase0.98集群
hadoop2.4.1集群上篇已搭建成功 http://blog.csdn.net/drhhyh/article/details/43966607官网下载hbase的包:hbase-0.98.6.1-hadoop2-bin.tar.gz1.上传hbase安装包到drh04 我是借助的xftp2.解压 [drh@drh04 hbase-0.98.6原创 2015-03-07 15:54:16 · 509 阅读 · 0 评论