MapReduce 练习一 找爷孙关系

最新推荐文章于 2024-06-18 21:36:33 发布
最新推荐文章于 2024-06-18 21:36:33 发布
阅读量2.3k 收藏 4
点赞数 1
分类专栏： hadoop-mapreduce 文章标签： hadoop mapreduce 练习题
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kuanxiangqi0897/article/details/78846118
版权

要求从给出的数据中寻找所关心的数据，它是对原始数据所包含信息的挖掘。下面进入这个实例。
实例中给出child-parent（孩子——父母）表，要求输出grandchild-grandparent（孙子——爷奶）
child parent
Tom Lucy

Tom Jack

Jone Lucy

Jone Jack

Lucy Mary

Lucy Ben

Jack Alice

Jack Jesse

Terry Alice

Terry Jesse

Philip Terry

Philip Alma

Mark Terry

Mark Alma

关系家族谱
这里写图片描述

代码详解

  /***
     * Tom   Lucy
     Tom   Jack
     Jone   Lucy
     Jone   Jack
     Lucy   Mary
     Lucy   Ben
     Jack   Alice
     Jack   Jesse
     Terry   Alice
     Terry   Jesse
     Philip   Terry
     Phi
最低0.47元/天 解锁文章
顾疏影
关注
  • 1
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Hadoop之利用mapreduce输出祖孙关系
qq_45864778的博客
01-10 4126
一、总体解析： 1.需求 实例中给出child-parent（孩子——父母）表，要求输出grandchild-grandparent（孙子——爷奶）表。 数据如下： A1,A2 B1,A2 B2,A31 A2,A31 A2,A32 A31,A41 2.实现思路 核心实现思路： （1）在Map阶段，分别将父子关系与相反的子父关系在各个value前补上前缀"-“与”+"标识此key-value中的va...
MapReduce经典案例爷孙关系(自连接MapJoin和ReduceJoin的两种实现)
一名假的程序猿
08-05 1715
需求： 求出所有具有爷孙关系的人 数据来源： 儿子 父亲 Tom Lucy Tom Jack Jone Lucy Jone Jack Lucy Mary Lucy Ben Jack Alice Jack Jesse Terry Alice Terry Jesse Philip Terry Philip Alma Mark Terry Mark Alma reduce-join 处理...
MapReduce编程(四) 单表关联
我只是一个简单的Coder，为了兴趣和理想奋斗在生活的道路上
03-05 2271
一、问题描述下面给出一个child-parent的表格，要求挖掘其中的父子辈关系，给出祖孙辈关系的表格。输入文件内容如下:child parent Steven Lucy Steven Jack Jone Lucy Jone Jack Lucy Mary Lucy Frank Jack Alice Jack Jesse David ...
分布式计算（六）：MapReduce（二）- 祖孙关系寻找
奔跑吧蚂蚁呀
08-31 1236
MapReduce求爷孙关系
Switfy的博客
08-22 4064
一、在网上找的题就拿来做了 要求从给出的数据中寻找所关心的数据，它是对原始数据所包含信息的挖掘。下面进入这个实例。 实例中给出child-parent（孩子——父母）表，要求输出grandchild-grandparent（孙子——爷奶） child   parent Tom   Lucy Tom   Jack Jone   Lucy Jone   Jack Lucy  
MapReduce实现单表关联
nankangren123的专栏
03-28 562
例如给出表child-parent表，要求输出grandchildren-grandparent表 给出： child parent Tom Lucy Tom Jack Jone Lucy Jone Jack Lucy Mary Lucy Ben Jack Alice Jack Jesse   输出： Tom Alice
mapreduce练习资源
04-03
该资源中中包含MapReduce的练习题，可以是你同过这些练习题更好的掌握MapReduce
MapReduce练习题实验报告1
08-08
MapReduce框架中map函数的输入value即为文件读入内容，map阶段之后是reduce阶段，对于reduce方法：它的输入key是map阶段从cont
Google MapReduce(一)
02-27
Google MapReduce（一） MapReduce 是一种解决问题的思路，而不是一个产品，它有多个工程实现，Google 在论文中也给出了它自己的工程架构实现。MapReduce 编程模型解决的问题是能够用分治法解决的问题，如网页抓取...
学生mapreduce成绩分析
06-02
学生mapreduce成绩分析
Mapreduce-1:python中的MapReduce的孙子/祖父母对
03-17
Mapreduce-1:python中的MapReduce的孙子/祖父母对
第一个Mapreduce程序.pdf
06-12
本文介绍了用Java编写并运行第一个mapreduce作业的步骤及遇到的问题和解决方案。
分布式计算MapReduce | Spark实验
Polaris的博客
08-03 3975
输入文件为学生成绩信息，包含了必修课与选修课成绩，格式如下：班级1, 姓名1, 科目1, 必修, 成绩1 （注：为换行符）班级2, 姓名2, 科目1, 必修, 成绩2 班级1, 姓名1, 科目2, 选修, 成绩3 ………., ………, ………, ………, ……… 编写两个Hadoop平台上的MapReduce程序，分别实现如下功能：计算每个学生必修课的平均成绩。按科目统计每个班的平均成绩。输入文件的每一行为具有父子/父女/母子/母女/关系的一对人名，例如：Tim, Andy Harry, Alice M
实例中给出child-parent（孩子——父母）表，要求输出grandchild-grandparent（孙子——爷奶）表
徐冉的博客
05-30 4869
      一·需求描述：   要求从给出的数据中寻找所关心的数据，它是对原始数据所包含信息的挖掘。下面进入这个实例。 实例中给出child-parent（孩子——父母）表，要求输出grandchild-grandparent（孙子——爷奶）表。 =================样本输入：=================== child parent Tom Lucy T...
Hadoop-挖掘child-parent表中信息
qq_40301475的博客
05-28 1322
Hadoop平台MapReduce编程 目标：给出一个child-parent的表格，要求挖掘其中的父子辈关系，给出祖孙辈关系的表格。 输入文件table.txt内容如下： child parent Steven Lucy Steven Jack Jone Lucy Jone Jack Lucy Mary Lucy Frank Jack Alice Jack Jesse David Alice David Jesse Philip David Philip Alma Mark David Mark Alma
mapreduce的爷孙关系问题
weixin_45247609的博客
09-09 638
这个题目,相信大家在网上已经看到很多解决方案了,我在拿到这个题的时候,先想的是,爷爷找孙子,还是孙子找爷爷. 先上数据: Tom-Lucy Tom-Jack Jone-Lucy Jone- Jack Lucy-Mary Lucy-Ben Jack-Alice Jack-Jesse Terry-Alice Terry-Jesse Philip-Terry Philip-Alma Mark-Terry Mark-Alma 题目:左边数据是child 右边数据是parent 找到当中的孙子和爷爷奶奶 上代
单表关联
aiyan1350的博客
04-02 219
实例描述： 实例中给出child-parent（孩子——父母）表，要求输出grandchild-grandparent（孙子——爷奶）表。 样例输入如下所示。 file： 　　　　　　　　　　　　　　　　　　　　 child parent Tom Lucy Tom...
spark:单表关联案例
superXZT的博客
12-12 1017
spark单表关联       题目：求孙子和祖父母的关系列表 数据： child        parent Tom        Lucy Tom        Jack Jone        Lucy Jone        Jack Lucy        Mary Lucy        Ben Jack        Alice Jack        Jesse Terry ...
Hadoop+Spark大数据技术（自命题试卷测试）
最新发布
qq_64684039的博客
06-18 1537
1. Hadoop 核心组件包括：A. HDFS 和 HiveB. HDFS 和 MapReduceC. HBase 和 SparkD. YARN 和 ZooKeeper2. HDFS 数据块存储方式的优势不包括：A. 文件大小不受单一磁盘大小限制B. 简化存储过程C. 提高数据访问速度D. 提高数据容错能力3. NameNode 的主要功能是：A. 存储数据块B. 处理数据读写请求C. 管理文件系统命名空间和元数据D. 备份 NameNode 的元数据。
mapreduce找爷孙 python
06-06
在MapReduce中，爷孙关系是一个非常常见的问题。举个例子，我们想要找到一个人的所有祖先或后代，就需要将人们按照他们的关系进行分类，父母属于祖先，子女属于后代。在Map阶段，我们可以使用键值对的形式将所有人...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值