- 博客(4)
- 收藏
- 关注
原创 第7章 MapReduce实战
第1关:年龄统计 编程要求 使用MapReduce计算班级每个学生的最好成绩,输入文件路径为/user/test/input,请将计算后的结果输出到/user/test/output/目录下。 测试说明 输入文件在你每次点击评测的时候,平台会为你创建,无需你自己创建,只需要启动HDFS,编写java代码即可。 输入文件的数据格式如下: 张三 12 李四 13 张三 89 李四 92 ... 依照如上格式你应该输出: 李四 92 具体本关的预期输出请查看右侧测试集。 因为大数据实训消耗资源
2021-06-17 17:22:26 6504 1
原创 educoder使用 mapreduce 实现倒排索引
编程要求 根据提示,在右侧编辑器的中的 begin-end 间补全 InvertIndex_origin 类中的 map 和 reduce 函数。具体实现如下。 读取 hdfs 中/input目录下的如下三个文件,文件内容如下: file1.txt内容: mapreduce is simple file2.txt内容: mapreduce is powerful and simple file3.txt内容: mapreduce and mapreduce 使用 mapreduce 处理后把结果
2021-06-17 17:18:20 3022
原创 python 小白教学 anaconda+pytorch-1.8.0+py3.6+cpu 清华镜像站成功下载 虚拟环境 快速
1.进入清华镜像站,找到适配的文件下载 https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/win-64/ 鉴于虚拟环境为python3.6,本次下载上图所示文件:pytorch-1.8.0-py3.6_cpu_0.tar.bz2(根据自己的安装意向以及配置自由选择) 2. 下载成功后,解压 3.将解压得到的文件夹中内容按照文件夹名称移动至envs\torch对应的文件夹下 将下载到的Lib文件夹中内容全选,.
2021-04-21 11:32:06 1318 4
原创 python 一行代码一分钟安装opencv2
pip install -i https://pypi.tuna.tsinghua.edu.cn/simple opencv-python 安装成功:
2021-04-21 09:36:47 150 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人