- 博客(2)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 hadoop集群运行MR jar 包 报错 running in uber mode : false
一、问题描述：mr 编写正常 打好jar包后运行jar。眼看 map 0% reduce 0% 然后就结束了也没有啥错误和异常唯一个报错 ：running in uber mode : false二、解决办法：加上这一句话：在构造job类中加上：System.setProperty("HADOOP_USER_NAME", "root");原因:操作HDFS文件系统权限问题,具...
2019-03-26 15:04:59
13247
4
原创 （统计单词数）mapreduce函数理解
一、隐藏的过程:1、读取hdfs上的一个file文件的块文件2、将块文件进行分片split3、读取split（分片）文件中的一行内容4、将一行内容转换为key-value的形式（key：为偏移量（即多少行，我的理解），value：为一行的内容）5、将key-value输入到自己的map函数中二、进入自己写的map函数：--自己的map函数作用是:1、读入一个key-......
2019-03-26 10:29:59
540
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人