天池新人实战赛之[离线赛]尝试（二）

最新推荐文章于 2020-03-18 22:35:46 发布
最新推荐文章于 2020-03-18 22:35:46 发布
阅读量1.2k 收藏 4
点赞数
分类专栏： 机器学习 文章标签： 天池 机器学习 特征处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_17697111/article/details/79927688
版权

上一篇文章已经将基本思路列出，现在已经根据第一篇文中的数据预处理方案处理出一个训练数据表

训练数据 11.22~11.27U-I集合行为数据

对应的大数据表名： temp_fin.temp_tianchi_train1_data

验证数据 11.29~12.04U-I集合行为数据

对应大数据表名：temp_fin.temp_tianchi_train2_data

预测数据 12.13~12.18U-I集合行为数据 12.19 U-I集合购买记录
对应大数据表名：temp_fin.temp_tianchi_train3_data

 

数据预处理思路：

1.筛选一些异常的训练数据（只买不看的U-I组合，只看不买的U-I组合）

2.调整训练数据中的正负样本比例

最低0.47元/天 解锁文章
ronaldo2018
关注
专栏目录
天池新人实战赛之[离线赛]-数据集
03-31
天池新人实战赛之[离线赛]-数据集
天池新人实战赛之[离线赛]尝试（一）
ronaldo-liu的博客
04-09 510
题目（https://tianchi.aliyun.com/getStart）就不贴了。经过一些百度的资料，可以将这个问题简化为：某个U-I组合在观察日是否有购买行为？(二分类问题) 接下来分几个步骤来拆解整个过程： 一.简单分析 将两个数据表.tianchi_fresh_comp_train_item和tianchi_fresh_comp_train_user存入到数据库中， 对应表...
天池新人实战赛之[离线赛]尝试（三）
ronaldo-liu的博客
04-16 598
接上面两篇文章，只提取10个特征，是远远不够的。看了一些参加S2比赛的博客总结，先通过一些强规则（SQL）来确定结果。获取前一日（12.18）添加了购物车，当天没有购买过并且在商品子集中的 U-I组合。SQL写法：--筛选出12.18添加进购物车的 select  a.user_id,a.item_id   from  (select  * from   vipfin.tianchi_fresh_...
机器学习-天池新人赛(离线赛)--初步数据分析
sinat_37935727的博客
03-18 787
import numpy as np import pandas as pd import math from sklearn.metrics import f1_score idx = pd.IndexSlice %matplotlib inline # 2. 获取数据 actions = pd.read_csv("./fresh_comp_offline/tianchi_fresh_com...
天池初体验——新人实战赛之[离线赛]
热门推荐
wy的点滴
11-05 1万+
写在开头：本篇博文的适用对象为对天池比赛完全不知如何下手的小伙伴。本文将从头开始记录如何最简单地整理数据、提取特征，再建立模型或者使用人工规则进行预测，然后选出数据并提交，最后得到结果。所以，本文并不会更多得关注特征的选择提取以及模型该如何建立。最后，本人所使用的工具为Spark，非常地方便，它包含了spark-sql工具，数据库默认使用的是derby，同时，Spark含有mllib库，能非常方便
天池新人实战赛之[离线赛]-初体验-Spark处理
留歌__36的博客
08-07 534
写在前面 这种直接提交购物车的方式不涉及任何算法，后续我会逐渐学习引入机器学习的相关算法，从而更好的对结果进行预测。截止 2019-08-07排名77/11111 package src.main.scala.com.csylh.august.tianchi.dataclearer import org.apache.spark.sql.{SaveMode, SparkSession} /**...
天池新人实战赛之[离线赛]-指数加权平均
weixin_30556959的博客
07-03 114
大赛链接 https://tianchi.aliyun.com/getStart/information.htm?spm=5176.100067.5678.2.6d75153cK2qkgK&raceId=231522 总之，就是给你一定量用户在一个月时间（11.18~12.18）之内的移动端行为数据（D），然后去判断这些用户在（12.19）对商品子集（P）的购买数据 刚看到...
天池新人实战赛之[离线赛]题目与思路
weixin_30512043的博客
03-23 289
1.1课题介绍 本课题以阿里巴巴移动电商平台的真实用户-商品行为数据为基础，同时提供移动时代特有的位置信息。您需要通过大数据和算法构建面向移动电子商务的商品推荐模型，挖掘数据背后丰富的内涵，为移动用户在合适的时间、合适的地点精准推荐合适的内容。 在真实的业务场景下，我们往往需要对所有商品的一个子集构建个性化推荐模型。在完成这件任务的过程中，我们不仅需要利用用户在这个商品子集上的行为数据，往往还...
从零开始天池新人离线赛-数据预处理
jackaroo_zyz的博客
05-24 2891
作为一个数据挖掘和Python编程的双面小白，从零就真的是从一张白纸开始了。 今天，首先学习怎么将阿里给我们的CSV文件导入到Python中； import csv itemcsv = file('d:/test/item.csv','rb') r1 = csv.reader(itemcsv) 到这步为止，初步将该item.csv导入了Python中； 接下来，如果想要打印这些数据，
天池新人实战赛之[离线赛]之商品推荐
简单，坚持
10-12 1136
本篇文章以阿里天池的商品推荐项目为例子，介绍了通过spark的als模型来做商品推荐的方法，通过StreamingContext来实现断点继续。
天池新人实战赛——阿里移动推荐算法大赛（御膳房、DTPAI、ODPS初体验）
光于前裕于后的博客
04-12 4480
几个名词： ODPS（OpenData Processing Service）：开放数据处理服务由阿里云自主研发，提供针对TB/PB级数据、实时性要求不高的分布式处理能力，应用于数据分析、挖掘、商业智能等领域。 DT（data technology）：数据时代 PAI（Platform of Artificial Intelligence）：人工智能平台 ODPS SQL：类似于SQL的语
天池离线赛 - 移动推荐算法
永远飞翔的鸟
03-13 534
因为思路已经总结的比较好了，所以，我就不多说了。拿过来作记录，供学习。 转载网址：https://blog.csdn.net/Snoopy_Yuan/article/details/72454636 天池离线赛 - 移动推荐算法（二） 天池离线赛 - 移动推荐算法（三） ...
天池离线赛 - 移动推荐算法（二）：基于简单规则的预测
Snoopy_Yuan技术部落格
06-03 7054
本文讨论如何运用一个简单的规则来进行预测，主要目的是感受一下天池赛答题评分的过程。
天池离线赛——移动推荐算法学习笔记2_特征工程
Chestnutttttt
06-06 468
参考的代码：https://blog.csdn.net/snoopy_yuanPart 3 特征工程1. 
天池离线赛——移动推荐算法练习笔记1
Chestnutttttt
06-11 419
练习，重点是动手+强化理解；1. datafream 基本使用：1）按索引取行：pd.read_csv(open(user_df, 'r'), index_col='time', date_parser=dateparser, parse_dates='time', ...
阿里移动推荐，新人离线赛-python实现
chen_kkkk的专栏
10-31 1054
移动推荐新手实战赛学习代码-python实现
天池新人实战赛o2o优惠券使用预测四（别家代码分析1）
masbbx123的博客
12-23 2435
弄了2天，发现还是对python不够熟悉，完全不能实现我的各种设想，所以，还是先参考别人的代码，先明白别人的思路和python的写法再说吧。 源代码地址请直接在CSDN上搜索，原文说未经许可不得转载，所以我也不放地址了，就记录下自己的一些阅读的想法。 首先将数据集合分为3个部分： 看看这3个部分是什么样子的：print(feature1.shape) print(dataset1.shape)
天池新人赛 o2o优惠券
最新发布
11-10
天池新人赛 O2O 优惠券是一项在线比赛，旨在鼓励参赛者运用数据分析和机器学习技术来解决O2O优惠券发放的问题。O2O即“线上到线下”，是指将线上平台的服务与线下实体商店的购物场景结合起来的商业模式。而优惠券则...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值