![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 77
尚琬凝霏
这个作者很懒,什么都没留下…
展开
-
mapreduce实例
1.统计单词个数(1)统计样本:word.txt(hadoop fs -put word.txt /word)number linux hadoop word countlinux number hadoop word countlinux hadoop eclipse word countlinux hadoop word java counteclipsejava原创 2017-07-29 19:24:13 · 552 阅读 · 0 评论 -
Hadoop集群搭建过程问题总结
1.datanode节点无法启动(1)无法与slave是通信检查slaves文件slave节点名称是否正确检查防火墙是否关闭(使用setup命令关闭防火墙,iptables -F 命令有时会失效,chkconfig IPtables on 命令需重启生效)检查/etc/hosts 是否配置正确(2)clusterID不匹配DataNode与namenode中的clust原创 2017-07-23 17:19:25 · 340 阅读 · 0 评论 -
使用JavaAPI操作HDFS系统中的文件及文件夹
1.基本操作(1)安装eclipse,在终端中进入eclipse安装目录,执行./eclipse命令打开eclipse;或在桌面创建eclipse启动器打开eclipse;(2)建立一个新的项目:File-new-java project:example(3)为项目添加hadoop 相关jar包: a.右击工程名--bulid path-configure bu原创 2017-07-29 10:51:13 · 4557 阅读 · 1 评论