MapReduce课程设计 好友推荐功能

于 2022-10-04 10:28:42 发布
阅读量638 收藏 2
点赞数 1
文章标签： mapreduce 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_51598535/article/details/127159048
版权
本文介绍了使用MapReduce实现好友推荐功能的过程。首先解释了好友推荐算法的基本需求，即预测并推荐可能存在联系的用户。接着详细说明了项目设计，包括互为推荐关系的定义和推荐度的计算方式。随后，提供了数据示例并描述了数据格式。文章还涵盖了程序实现的步骤，如添加依赖、编写Mapper和Reducer类，并指导如何打包代码、上传到分布式文件系统以及运行测试。最后，提到了测试过程中的注意事项，如保持JDK版本一致。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1.实例介绍

      好友推荐算法在实际的社交环境中应用较多，比如qq软件中的“你可能认识的好友° 或者Facebook中的好友推介。好友推荐功能简单的说是这样一个需求，预测菜两个人是否认识，并推荐为好友，并且某两个非好友的用户，他们的共同好友越多。那么他们越可能认识。

2.项目说明

  • 互为推荐关系
    • 非好友的两个人之间存在相同好友则互为推荐关系
    • 朋友圈两个非好友的人，存在共同好友人数越多，越值得推荐
    • 存在一个共同好友，值为1；存在多个值累加

3.数据

xiaoming laowang renhua linzhiling
laowang xiaoming fengjie
renhua xiaoming ligang fengjie
linzhiling xiaoming ligang fengjie guomeimei
ligang renhua fengjie linzhiling
guomeimei fengjie linzhiling
fengjie renhua laowang linzhiling guomeimei

    数据使用空格分割，每行是一个用户以及其对应的好友，每行的第一列名字是用户的名字，后面的是其对应的好友。

4.程序实现

4.1在pom.xml中添加依赖

<dependencies>
        <dependency>
            <groupId>org.apa

最低0.47元/天 解锁文章
HUNG4050
关注
MapReduce课程设计-----好友推荐功能
qq_53025556的博客
09-30 1146
MapReduce课程设计-----好友推荐功能，步骤详细且通俗易懂
利用MapReduce实现好友推荐
一曲无痕奈何
08-09 755
MapReduce的好友推荐案列： 推荐好友的好友 是简单的好友列表的差集吗？ 最应该推荐的好友TopN，如何排名？ 简单数据集： tom hello hadoop cat world hadoop hello hive cat tom hive mr hive hello hive cat hadoop world hello mr hadoop tom hive ...
MapReduce实现QQ好友推荐
u010458114的博客
10-12 741
大家都知道qq用户量上亿，每个用户又有很多的好友，因此，数据量十分的庞大，如何才能实现QQ的好友推荐呢？  下面举一个例子：  A有QQ好友B  B有QQ好友C  则A，C有可能是好友。  当A登录的时候，则会向A推荐C，当C登录的时候，则会向C推荐A。 [java] view plain copy package com.Frie
基于mapreduce实现好友推荐功能
putty_putty的博客
03-01 618
数据格式： hadoop hello hdfs  world tom cat cat dog hello world 每一行代表一个好友对，具体的思路是将所有数据倒置 map 阶段hadoop hello ==>  hadoop hello   | hello hadoop reduce阶段，由于键相同的已经合并，在合并的数组中任何两个人都有可能是好友 代码如下：
MapReduce实现好友单向推荐
weixin_44015128的博客
10-11 367
需求： 现有一份QQ好友数据，其中数据第一列代表用户QQ昵称，第二列代表好友QQ昵称。要求编写MapReduce程序实现QQ好友推荐，例如A的好友是B，B的好友是C，即A与C有共同的好友B，则可以向A推荐C，向C推荐A。通过MapReduce完成推荐后，会发现存在给A推B，也给B推A的重复情况，请继续完成处理，避免这个重复操作。 数据： A,B A,C A,E B,D B,A B,F C,E C,A 共同好友依次为A，B，C 即要求运行结果为：A -> C,A -> D… 代码如下： impor
mapreduce编程 好友推荐
11-01
在qq 微博等众多社交平台中，用户a有n位好友，在这n位好友里面的好友中有m位不是a的直接好友（例如用户b）。但是通过朋友的朋友，a与b之间有多位共同好友，换而言之，a是b可能认识的人。
用Map/Reduce来做好友推荐
跳舞的驴子
03-28 566
SNS网站都有一个功能，就是好友推荐(或者Follower推荐)。例如，在人人网上出现的“你可能认识的人”。怎么来实现呢，有一个很简单的办法。如果小刚和小明不是好友，但是他们有很多的共同好友。那么可以认为，A和B很可能相识。 从图论的讲法上看，就是先列出一个人(记为小A)的所有朋友的朋友，在寻找小A和这些人之间有多少长度为2的通路。将这些通路数排序，寻找最高的那几个就可以了。 所以我们
第三节 Hadoop学习案例——MapReduce课程设计 好友推荐功能
qq_53114527的博客
09-30 5188
Hadoop学习案例——MapReduce课程设计 好友推荐功能
基于mapreduce的并行算法的设计 课件
11-13
一份基于mapreduce的并行算法的设计的课件，介绍了算法的原理以及几种实现
Hadoop课程设计-基于Java和mapreduce实现的贝叶斯文本分类器设计
10-07
Hadoop课程设计-基于Java和mapreduce实现的贝叶斯文本分类器设计; Hadoop课程设计-基于Java和mapreduce实现的贝叶斯文本分类器设计;
MapReduce案例：好友推荐简单实现
arne's Blog
06-18 3192
一、好友推荐算法在实际的社交环境中应用较多，比如qq软件中的“你可能认识的好友”或者是Facebook中的好友推介。常见的好友推介算法有六度分割理论，三元闭包论和最基本的好友推介算法。 学习和分享好友推介算法。 假设用户A有好友A1，A2，A3，则A1，A2，A3相互之间都可能通过好友A认识，是潜在的好友关系。如果用户B有好友A1，A2，B1，则A1，A2，B1相互之间都可能通过好友B认识。如下图...
MapReduce实例——好友推荐
sinat_34045444的博客
01-14 4873
1. 实例介绍 好友推荐算法在实际的社交环境中应用较多，比如qq软件中的“你可能认识的好友”或者是Facebook中的好友推介。好友推荐功能简单的说是这样一个需求，预测某两个人是否认识，并推荐为好友，并且某两个非好友的用户，他们的共同好友越多，那么他们越可能认识。 2. 数据流程 3. 具体实现 3.1 上传数据qq.txt tom cat hadoop hello hello mr tom...
Hadoop 2.6.5使用mapreduce程序实现qq好友推送
技术成就梦想，梦想成就未来。If you try hard enough, it can be.
06-05 421
1、准备模拟数据 创建文件qqFriend.txt，并上传到hdfs上（/qq/input/qqFriend.txt）。 文件内容如下： aa bb cc dd ee ff bb mm ff ww 从上面的好友列表可以看出: 1、aa和mm有共同的好友bb，所以aa和mm可以互相推送好友 2、ee和ww有共同的好友ff，所以ee和ww可以互相推送好友 2、写mapreduc...
MapReduce课设
qq_52396030的博客
12-14 1992
书写bean类 package ks; import org.apache.hadoop.io.Writable; import java.io.DataInput; import java.io.DataOutput; import java.io.IOException; public class mybean implements Writable{ //定义变量 private long upFlow; //上行数据包数 private long downFlow; //下行
MapReduce课程学习——好友推荐功能实现
qq_53879605的博客
09-30 1428
MapReduce学习中的好友推荐功能的实现，在hadoop集群中实现
大数据系列hadoop——MapReduce实例——好友推荐
guduyishuai的博客
08-09 4393
目录 一、简介 二、思路 三、实现 一、简介              好友推荐功能简单的说是这样一个需求，预测某两个人是否认识，并推荐为好友。 二、思路              某两个非好友的用户，他们的共同好友越多，那么他们越可能认识。               比如，原始数据如下 Tom Cat Hello Hadoop Spring Cat Hello Spring...
基于Hadoop的高分好友推荐系统设计与实现指南
该项目非常适合计算机相关专业的学生、教师以及企业员工使用，可以用作课程设计、作业、项目演示以及毕业设计等。如果用户有一定的基础，还可以在此代码基础上进行修改，实现其他功能。 Hadoop是一个开源的框架，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值