阿里巴巴数据竞赛方案——推荐系统的核心

最新推荐文章于 2017-10-17 14:57:51 发布
最新推荐文章于 2017-10-17 14:57:51 发布
阅读量1.7k 收藏
点赞数
分类专栏： 机器学习&数据挖掘 文章标签： 数据挖掘 推荐系统
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Justin_Xip/article/details/37520453
版权

方案结果：第三周第一次提交排名在30名内。

Justin_Xip
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
阿里大数据竞赛(天猫推荐算法)
u013233411的专栏
04-08 4964
莫名其妙搞了这个比赛 然后被虐得生活不能自理 ...开始还能排到top80 现在都要掉出Top500了
阿里巴巴大数据竞赛
01-05
AliDMCompetition 阿里巴巴大数据竞赛（http://102.alibaba.com/competition/addDiscovery/index.htm ） 数据说明 提供的原始文件有大约4M左右，涉及1千多天猫用户，几千个天猫品牌，总共10万多条的行为记录。 用户4种行为类型(Type)对应代码分别为： 点击：0 购买：1 收藏：2 购物车：3 提交格式 参赛者将预测的用户存入文本文件中，格式如下： user_id \t brand_id , brand_id , brand_id \n 上传的结果文件名字不限(20字以内)，文件必须为txt格式。 预测结果 真实购买记录一共有3526条 TODO 注意调整正负样本比例 在LR的基础上做RawLR。按照天猫内部的思路来。 在LR的基础上做MRLR，样本提取要更加合理。 在UserCF和ItemCF上加上时间因子的影响。 利用UserCF做好的用户聚类、ItemCF做好的品牌聚类来做细化的LR，或者在聚类 上做LFM 在ItemCF的思路上挖掘频繁项集/购买模式，如购买品牌A和商品后往往会购买 品牌B的商品 LFM 数据集特征 某一商品在购买前的一段时间内会出现大量点击次数，购买完成后的一段时间内也会出现大量点击次数 用户在本月有过行为的商品极少出现在下个月的购买列表里 根据观察推断：用户浏览商品的行为可分为两类： 无目的浏览，可能会在浏览过程中对某些中意的商品进行购买，数据表现为有大量点击次数<=2的行为记录，但很少有购买行为 有目的的查找商品，可能是事先有需求的情况，数据表现为一段时间内点击商品数很少， 但点击过的商品大多数都进行了购买 参考论文 See https://www.google.com.hk/search?q=data+mining+time+series&ie=utf-8&oe=utf-8&aq=t for more. Chapter 1 MINING TIME SERIES DATA - ResearchGate 模型列表 LR(model=LinearSVC(C=10, loss='l1'), alpha=0.7, degree=1) | TOTAL VISITED BOUGHT FAVO CART NEW | Pred # 1438 1436 626 71 12 | % 100% 99.861% 43.533% 4.937% 0.834% | Real # 1311 250 89 10 1 | % 100% 19.069% 6.789% 0.763% 0.076% Hit # 76 Precision 5.285118% Recall 5.797101% F1 Score 5.529283% LR(model=LogisticRegression(penalty='l1'), alpha=0.7, degree=1) | TOTAL VISITED BOUGHT FAVO CART NEW | Pred # 1472 1470 615 68 14 | % 100% 99.864% 41.780% 4.620% 0.951% | Real # 1311 250 89 10 1 | % 100% 19.069% 6.789% 0.763% 0.076% Hit # 74 Precision 5.027174% Recall 5.644546% F1 Score 5.318002% 这个模型在数据变成2次后，Precision ~ 16%，同时F1 ~ 3% LR(model=Perceptron(penalty='l1'), alpha=0.7, degree=1) | TOTAL VISITED BOUGHT FAVO CART NEW | Pred # 3145 3140 1023 130 26 | % 100% 99.841% 32.528% 4.134% 0.827% | Real # 1311 250 89 10 1 | % 100% 19.069% 6.789% 0.763% 0.076% Hit # 113 Precis
阿里云 大数据 推荐系统
likika2012的专栏
04-12 8181
鉴于本小弱非数据挖掘出身，只是在coursera上跟过Ng的机器学习，估计最后做一个regression再上一个协同过滤就到极限了，就不去争名次了。写一些step by step 的入门东西，帮助感兴趣的新手快速入手，希望大家可以快速的参与进比赛来，如果真的有帮助到某个同学的话，那就苟富贵勿相忘了。 首先扫一眼数据发现时间那一列居然是中文，先转成可处理的日期格式，就假设数据是13年的好了。
阿里大数据竞赛
John159151的专栏
09-02 1356
看了一下阿里大数据竞赛top9的算法，发现挺有意思的。数据的处理、feature的提取一般都是最重要的，能弄个几百维的feature还是比较费心思的。model方面gbdt还是很受欢迎的，包括我现在做的项目。也许是因为阿里提供了gbdt的接口，用起来非常方便。不过感觉F1最多也就6点多，看来预测还真是难啊。。。
阿里天池大数据竞赛（杂）
经管与EE复合奇葩专业的专栏
04-30 1457
//2015年4月30日 //未完成 预处理： 刷点击用户 重复记录 一、模型跑不出分层，我们自己来分层 模型一：预测重复购买的 18/12548 模型二：对已买过的商品 43/43720 模型三：对已交互的，新品 124/302800 模型四：前一天加购物车的 51/1027 二、正例从何而来 全正例 三、业务熟练 发现加很多购物车的用户
阿里巴巴-数据中台通用解决方案核心宣讲材料 .pdf
10-30
阿里巴巴-数据中台通用解决方案核心
阿里巴巴大数据之路——数据技术篇.pdf
12-24
阿里巴巴大数据之路的数据技术篇主要探讨了企业大数据处理的架构及其核心组成部分，包括数据采集、计算、服务和应用四个层面。在整体架构中，数据采集层使用DataX等工具进行数据同步，数据计算层依赖MaxCompute这样...
2022阿里巴巴数学竞赛赛题及答案.rar
最新发布
08-31
阿里巴巴数学竞赛是全球知名的大型数学赛事，旨在激发全球范围内对数学的兴趣，促进数学与产业的交叉创新。2022年的阿里巴巴数学竞赛包含了丰富的数学问题，涵盖了基础数学、应用数学、计算数学等多个领域，为参赛者...
2021阿里巴巴数学竞赛赛题及答案.rar
08-31
阿里巴巴数学竞赛是全球知名的年度数学盛会，旨在激发数学爱好者对数学的兴趣，促进数学与实际问题的结合，推动科技发展。2021年的比赛再次吸引了众多参赛者参与，提供了丰富的数学挑战。本压缩包文件“2021阿里巴巴...
阿里巴巴推荐系统框架
03-12
此ppt主要讲述阿里巴巴推荐系统框架及经典算法思路，内容思路清晰，易懂
阿里巴巴数学竞赛 题目和答案
01-10
阿里巴巴数学竞赛 题目和答案
阿里天池大数据竞赛
南山牧笛的博客
08-23 4736
《阿里移动推荐算法》 2014年是阿里巴巴集团移动电商业务快速发展的一年，例如2014双11大促中移动端成交占比达到42.6%。相比PC时代，移动端网络的访问是随时随地的，具有更丰富的场景数据，比如用户的位置信息、用户访问的时间规律等。本次大赛以阿里巴巴移动电商平台的真实用户-商品行为数据为基础，同时提供移动时代特有的位置信息，而参赛队伍则需要通过大数据和算法构面向建移动电子商务的商品推
事非经过不知难-阿里大数据推荐大赛总结
csf的专栏
08-02 2万+
1、成绩单 大赛地址：http://102.alibaba.com/competition/addDiscovery/gameTopic.htm 最终成绩：http://102.alibaba.com/competition/addDiscovery/totalRank.htm 参赛队伍数：7276     S1：          成绩F1|排名  7.07%|205
阿里巴巴大数据竞赛总结
weixin_30526593的博客
08-10 670
——谨将此文献给阿瑞(@Nyanko君一生懸命)和湛卢。阿瑞在MapReduce等方面提供的技术支持，使我们成为最早充分利用ODPS的团队之一；湛卢提出很多分析问题的新思路，让我们在走投无路的时候屡次重拾希望。 0. 写在最前面 这个系列的几篇文章，记录我们队对于问题的整个处理过程。分成两个部分：首先的这一篇，记录我们分析问题的思路，以及由此建立的特征体系，模型的选择和融合；下一...
阿里巴巴大数据竞赛(2014年3月10日到11月)
u014480925的专栏
04-03 5385
大赛简介 阿里巴巴大数据竞赛是阿里巴巴集团主办，在阿里巴巴大数据科研平台——“天池”上开展的，基于天猫海量真实用户的访问数据的推荐算法大赛。 本次比赛的目的是让广大的高校同学在大数据时代的背景下，有机会学习和利用阿里巴巴的大数据和云计算平台，尝试解决真实的业务与社会问题。 整个比赛分为三季（season）： Season 1：2014年3月10日至4月20日，参赛者可以下载少量天猫的真实行
基于大数据技术推荐系统算法案例实战教程
qq_40577957的博客
10-17 4261
基于大数据技术推荐系统算法案例实战教程 网盘下载：https://pan.baidu.com/s/1bCEJp0 密码: vrvf 互联网行业是大数据应用最前沿的阵地，目前主流的大数据技术，包括 hadoop，spark等，全部来自于一线互联网公司。 从应用角度讲，大数据在互联网领域主要有三类应用：搜索引擎(比如百度，谷歌等)，广告系统（比如百度凤巢，阿里妈妈等）和推荐系统（
天猫推荐算法团队的那些事儿
u014480925的专栏
04-03 3540
天猫技术部算法组是一个相对比较新的团队，刚刚成立一年，目前有10个算法工程师和5个开发工程师。这个团队所负责的内容是天猫上的数十个推荐产品，这些推荐产品帮助消费者找到他们喜欢的东西，将用户跟商品匹配的路径缩短。当然对天猫平台来说，推荐算法的价值在于提高转化率。从去年的双十一开始，天猫技术部推荐算法组第一次将推荐产品引入到了双十一大促活动当中。 2014年，阿里巴巴集团举办了阿里巴巴大数据竞赛，大
阿里天池大数据之移动推荐算法大赛总结及代码全公布
热门推荐
Datuqiqi的博客
07-10 3万+
移动推荐算法比赛已经结束了一个多星期了，现在写一篇文章来回顾一下自己的参赛历程。 首先，对不了解这个比赛的同学们介绍一下这个比赛（引用自官网）： 赛题简介 2014年是阿里巴巴集团移动电商业务快速发展的一年，例如2014双11大促中移动端成交占比达到42.6%，超过240亿元。相比PC时代，移动端网络的访问是随时随地的，具有更丰富的场景数据，比如用户的位置信息、用户访问的时间规律等。 本次
阿里巴巴离线大数据处理平台30.ppt
11-21
阿里巴巴离线大数据处理平台30.ppt是一个深入探讨阿里巴巴在大数据处理领域的重要成果和技术解决方案的演示文稿。该平台是阿里巴巴针对大数据时代挑战而设计的，特别是为了满足企业级大规模数据处理的需求。主要内容...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值