【中国大数据算法大赛】基于移动网络通讯行为的风险用户识别

本文介绍了中国大数据算法大赛中基于移动网络通讯行为的风险用户识别任务。通过对9999个用户的数据分析,包括通话、短信、网站/App访问记录,利用特征提取和模型调参来构建风险用户判别模型。关键特征集中在voice和sms数据集中,使用LightGBM模型并调整参数。虽然结果不尽如人意,但作者表达了对数据挖掘的热情并期望未来改进。
摘要由CSDN通过智能技术生成

【中国大数据算法大赛】基于移动网络通讯行为的风险用户识别

比赛内容评分算法

比赛按如下公式计算得分:
score = 0.6 × auc + 0.4 × F1
其中:
auc值为在测试集上,根据预测结果按照标准auc定义计算的分值;
F1值为针对测试集中实际标签为1(风险用户)的用户,根据预测结果,按照标准F-measure定义计算的分值。

1.数据来源和使用说明

提供45个连续自然日期间,抽样模拟的9999个用户每天的通话、短信、访问网站/App记录的脱敏数据,基于这些用户的移动网络使用行为,判别用户属于风险用户的可能性。
  用户id按照u0001~u9999编号。其中:
• u0001~u4999用户作为训练集,对每个用户给出是否为风险用户的标签(0-非风险用户,1-风险用户),在赛事启动时下发;
• u5000~u6999用户作为初赛阶段测试集A,不带用户风险标签,在初赛阶段下发;
• u7000~u9999用户作为复赛阶段测试集B,不带用户风险标签,在复赛阶段下发。
  数据表中部分列存在空值或NULL,少量uid可能在部分记录表中未出现(代表该用户在此期间没有相应的通话、短信或上网行为)需要自行补充。

2.统计特征

统计每个用户的号码通话的所有与不同的号码数量,以及与均值的差
统计用户通话in、out的不同号码数量,in、out的差值,以及所占比例。
统计一些特殊号码,如opp_head为100的,像运营商的号码;170、171虚拟号码段
统计不同opp_head的unique_count
通话时长的相关统计量,如均值, 最大值,中位数,标准差,最小值等
统计不同call_type下的opp_num
统计不同opp_len下的opp_num

3.任务描述

<

传感器技术、无线通讯技术、嵌入式计算技术、分布式信息处理技术、微电子技术等领域的进步及相互结合,推动了无线传感器网络的快速发展。无线传感 器网络将逻辑上的信息世界与客观上的物理世界连接起来,改变了人类与环境的 交互方式,提供了利用逻辑信息来表述客观世界的一种有效的、便捷的方法。目 前,无线传感器网络已经广泛地应用于环境智能、环境监控、工业制造、交通运 输、军事工程等众多领域。 作为无线传感器网络的一个重要应用领域,环境智能泛指能感知到用户的存 在并为其提供智能化服务的电子环境和系统。环境智能的实现依赖于与用户行为 密切相关的环境信息的采集和处理,依赖于对用户行为的分析、判断和推理,如; 判断用户的位置、识别用户行为、检测用户与环境的交互等,并在此基础上为 用户提供智能化的服务。 本文的研究主要针对环境智能中的两个研究重点:行为识别和目标定位。对 于行为识别,介绍了基于环境变量的行为识别、人物交互式行为识别和穿戴式行 为识别三种方法,并着重分析了穿戴式行为识别方法。穿戴式行为识别方法常采 用监督学习方法,但该方法不具有异常检测能力和扩展学习能力。本文引入一类 分类算法,利用组合高斯一类分类模型来判断行为是否是己知的。对于已知行为, 采用加权支持向量机分类算法识别行为类别:对于未知行为,在分段算法的 基础上,提取新行为的样本加入到识别系统中,扩展系统的识别能力。 为了实现识别算法在传感器网络内的分布式实施,本文提出了一种基于移动 代理的分布式分类方法,并将此方法运用到两种典型分类算法中。首先通过分解 分类模型,将模型参数存放到对应的各个传感器节点上,实现分类模型的离散化; 其次,在分类时,通过每个传感器节点计算自己的特征值和分类数据,实现分类 摘要 操作的离散化:最后,利用移动代理串行访问各个节点,累积计算结果。与集中 式分类算法相比较,基于移动代理的分布式分类算法可以减小带宽需求,平衡各 个节点之间的计算、存储和能量消耗。 对于目标定位,本文介绍人员定位和声音源定位。在人员定位中,常采用的 方法往往需要用户穿戴传感器节点或在传感器节点上安装附加设备,本文提出了 一种基于无线电波的非穿戴式定位方法,利用接收信号强度的变化来判断是否有 人出现在一对无线电收发机之间,进而判断其位置。 对于声音源定位,本文提出了一种源能量未知情况下的分布式声音源定位方 法。文章结合增量梯度算法和基于能量比的声音源定位方法,通过分解和重组能 量比定位方法的代价函数,得到适合分布式实施的迭代公式。采用合适的能量比 个数以及迭代起始点位置,该方法可以获得与穷尽搜索方法近似的准确率,但只 需要非常小的计算消耗。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值