大数据,hadoop编程
龙骨
这个作者很懒,什么都没留下…
展开
-
解决Exception: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z
在Linux虚拟机中运行代码比较不方便。本文讲述怎么在Windows下配置eclipse开发hadoop。本文针对hadoop-2.7.3 win7 64位版本。 一、实现在Linux下用eclipse开发hadoop 1、把hadoop-eclipse-plugin-2.7.3放在eclipse的plugins或者dropins目录下,eclipse就可以写mapreduce了。 2、原创 2017-02-16 02:27:09 · 9093 阅读 · 1 评论 -
hadoop编程工具类
1、遍历一个HDFS文件夹 public static void Scanner() throws IOException{ Configuration conf=new Configuration(); conf.set("fs.defaultFS","hdfs://localhost:9000"); FileSystem hdfs=FileSystem.get(conf);原创 2017-02-13 01:46:50 · 386 阅读 · 0 评论 -
Hadoop的namenode没有起来
1、删除/usr/local/hadoop/hdfs/name 目录 2、删除core-site.xml(etc下),hadoop.tmp.dir 指向的目录 或者修改一下文件名 3、bin下停止stop -all.sh hadoop namenode -format 4、注意 /etc/hosts 主机映射关系原创 2017-06-25 22:52:51 · 4396 阅读 · 1 评论