- 博客(3)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 mapreduce 班级学生成绩统计
这个是最近的一个实验，其中这个实验老师的要求是1 统计每个班成绩的最大值 最小值 并且输出姓名 如果有多个那么要都要输出 ，然后输出每个班的平均值 再者就是每个班的成绩分布，优秀良好，及格不及格的个数2 统计全部成绩的最大值最小值 要求如上其中有一些思路可以说一下，一开始我是准备创建一个对象数组来存储每个班级的 最大值 最小值 姓名 还有总和 个数 但是这样很麻烦，因为要初始化，还有...
2019-04-02 10:38:37
6234
2
原创 hadoop mapreduce wordcount识别字符 idea
这个代码，大家刚接触maoreduce的时候一定会遇到，这是一个比较典型的程序，具体的我都在代码中有注释，其中需要注意的地方就是 hadoop在每次产生输出以后，output的文件夹不能存在，否则会报错，其中我在运行的时候遇到了一些其他的错误，这里简单说一下如果报错提示 一直在connect hdfs连接不上，那么可能是你hadoop的防火墙没有关闭，还有可能是ssh的原因。如果报错是权限问题 那...
2019-04-02 10:26:31
246
原创 hadoop idea 本地上传文件到hdfs
最近在学习hadoop编程，其中需要将数据上传到hafs仓库，但是要先复制到centos下再上传上去，比较麻烦，所以直接写了一个上传的程序，这个代码不能实现循环上传多个文件，有相应的函数，你可以试一下，也不是很难。import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;impor...
2019-04-02 10:09:16
3438
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人