- 博客(8)
- 收藏
- 关注
原创 MapReduce求出各部门人员名单
实验名称求出各部门人员名单实验目的1、熟练理解和掌握MapReduce编程模型2、掌握使用其他语言实现MapReduce实验原理http://hadoop.apache.org/docs/r1.0.4/cn/streaming.html实验环境Ubuntu 16.04Hadoop 2.7.3Python 3.6python代码编写1、创建map.py文件自行编程完成,实现要点:逐行读取上一步两个文件的内容分割成数据列表后,根据列表长度判断是员工表还是部门表期望输出:部门编号,
2020-11-19 19:16:18
845
原创 MapReduce求各年销售笔数,各年销售总额
实验名称求各年销售笔数,各年销售总额实验目的1、熟练理解和掌握MapReduce编程模型2、掌握使用其他语言实现MapReduce实验原理http://hadoop.apache.org/docs/r1.0.4/cn/streaming.html实验环境Ubuntu 16.04Hadoop 2.7.3Python 3.6实验要求自行编写map.py代码,注意要点:1、对空白行的处理,可判断 line[0] != ‘’2、时间数据包含年月日,只需截取年份3、可以将每行订单数据都算
2020-11-19 17:46:30
1304
原创 MapReduce分析和编写WordCount程序
实验名称分析和编写wordcount程序实验目的1、熟练理解和掌握MapReduce编程模型2、学会使用map和reduce方法编写wordcount案例,实现需求:对输入文件统计单词频率实验原理http://hadoop.apache.org/docs/r1.0.4/cn/streaming.html实验环境Ubuntu 16.04Hadoop 2.7.3Python 3.6python代码编写1、创建map.py文件(作业要求:添加去除标点符号的处理;把大写字母都转成小写)im
2020-11-19 17:38:08
776
原创 使用Map-Reduce求各年销售笔数,各年销售总额
python+streaming实验:求各年销售笔数,各年销售总额实验环境:Linux下用map\reduce处理数据集实验要求:一、创建map.py文件,注意要点:1、对空白行的处理,可判断 line[0] != ‘’2、时间数据包含年月日,只需截取年份3、可以将每行订单数据都算为1笔4、目标输出格式:年份,数额二、自行编写reduce.py代码,注意要点1、可以将数据的行数当成笔数2、输出时应按年份排好序3、目标输出格式: 年份,笔数-总额(总额要求转化成k且保留两位小数,如13
2020-11-02 15:58:59
4242
4
原创 python基础
异常处理Python 标准异常总结Python 标准警告总结try - except 语句try - except - finally 语句try - except - else 语句raise语句
2020-09-08 23:25:22
98
原创 python基础
常用的几种语句一、条件语句二、循环语句条件语句if 语句if - else 语句if - elif - else 语句assert 关键词循环语句while 循环while - else 循环for 循环for - else 循环range() 函数enumerate()函数break 语句continue 语句pass 语句...
2020-09-07 19:56:09
160
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人