【阿里云天池】机器学习学习赛-测一测你的一见钟情程度

本文记录了一位AI初学者在学习机器学习的过程中,参与阿里云天池一见钟情程度预测比赛的经历。通过分析数据、处理缺失值、特征选择和模型训练(使用神经网络模型),最终提升了模型的预测准确率至90%,相比基础的逻辑回归模型提高了7个百分点。
摘要由CSDN通过智能技术生成

AI 初学者,刚刚接触机器学习不久,记录一下自己的成长历程,希望多年之后回首,会感谢现在努力的自己。 

历经 8 个星期的学习,基本学习完了西瓜书上的 10 个重要模型,首次接触机器学习比赛,选择了阿里云天池上的学习赛:测一测你的一见钟情程度来进行学习比赛流程,baseline 选择的是天池该比赛论坛中置顶的逻辑回归模型,预测准确率为 83%。

首先,引入过程中需要使用的包

import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
import seaborn as sb
from sklearn.neural_network import MLPClassifier
from sklearn.model_selection import train_test_split
from sklearn.metrics import classification_report
import imblearn as ibl

pandas、numpy 是机器学习中常用的数据处理包,matplotlib 是 Python 中常用的实现可视化的画图包,而 seaborn 则是基于 matplotlib 的画图包,能够画出比 matplotlib 更加丰富的可视化图像,帮助更清晰的理解数据特征,而 imblearn 包则能处理采样的不平衡,让机器学习结果更加准确。其中,pandas、numpy、matplotlib、seaborn、sklearn 已经包含在 Anaconda 环境中,而 imbalanced-learn 则需要额外安装。

使用 pandas 读入数据之后分析数据的组成,查看是否有空缺值以及空缺值占比为多少,一般来说都会有一些空缺值,空缺值占比过多的特征不太适合拿来做为学习特征

missing_percent = data.isnull().sum() * 100 / len(data)
print(missing_percent.sort_values())

查看完空缺值占比情况之后对比较明显的几个特征进行一个可视化,看一下该特征对学习结果的影响情况,这里选择了查看相亲中脱单比例性别年龄的相关关系并进行可视化

# 第一张图:通过该活动成功脱单的人
plt.subplot(1, 2, 1)
groupSize_matche
### 回答1: 阿里云天池是一个非常有名的数据科学竞平台,其中机器学习是其中的一个重要组成部分。在这个竞中,参者需要使用机器学习算法来解决各种各样的问题,例如图像识别、自然语言处理、推荐系统等等。 机器学习的解题过程通常包括以下几个步骤: 1. 数据预处理:参者需要对提供的数据进行清洗、特征提取、数据转换等操作,以便于后续的建模和训练。 2. 模型选择:参者需要选择适合当前问题的机器学习算法,并对其进行调参和优化。 3. 模型训练:参者需要使用训练数据对模型进行训练,并对训练过程进行监控和调整。 4. 模型评估:参者需要使用测试数据对模型进行评估,以确定其在实际应用中的性能表现。 5. 结果提交:参者需要将最终的模型结果提交到竞平台上进行评估和排名。 在机器学习中,成功的关键在于对问题的深入理解和对机器学习算法的熟练掌握。同时,参者还需要具备良好的团队合作能力和沟通能力,以便于在竞中取得更好的成绩。 ### 回答2: 阿里云天池是一个非常受欢迎的机器学习平台,它汇集了大量来自世界各地的数据科学家,分享了一系列有趣的竞和可用的数据集,供参选手使用。机器学习篇中,我们将解析一些常见的阿里云天池题目,让大家对机器学习有更深入的了解。 一、题选取 阿里云天池题通常与商业、医疗等复杂领域相关,选择数据集时要了解行业背景和数据质量,以准确地判断模型的准确性和适用性。此外,在选择题时,还要考虑与参选手一起合作的可能性,以及他们可能使用的算法和技术。因此,为了成功解决题,参者应当仔细研究题目的背景、数据、分析目标等内容,有助于更好地理解问题及其解决方案。 二、数据清洗 参者在使用数据时,需要对其进行实质性的预处理和清洗工作,以减少不准确的数据对结果的影响。预处理和清洗包括基本的数据处理,例如缺失值、异常值和重复值的处理,还需要利用可视化和探索性数据分析等技术来检查数据的分布情况、相互关系和异常值等问题。 三、特征选择 在构建模型之前,参选手必须确定哪些特征会对问题的解决产生实际影响。这个过程称为特征选择,它旨在通过保留最相关的特征来减少模型复杂性,提高准确性,并且还有助于减少数据集的维数。特征选择包括基于统计学和机器学习的算法,同时应该考虑特征的相关性和重要性。 四、建模和评估 参者在解决问题时,需要考虑使用何种算法,以及如何构建对应的模型。此外,还需在不同的算法和模型之间进行比较,并选择最优模型。最后,应该针对模型进行评估,以确保各种重要性能指标(例如准确性,召回率,精确度等)都得到最佳表现。 总的来说,机器学习是一种复杂而令人兴奋的技术,参者要考虑数据质量、数据清洗、特征选择、建模和评估等诸多因素。通过参加阿里云天池,大家可以不断学习和练习,不仅提升自己的技能,同时还有机会获得丰厚的奖励。 ### 回答3: 阿里云天池是一个集数据竞、人才选拔、行业交流、技术分享、产学研合作等多种功能于一体的大型平台。其中,机器学习篇的题挑战包括了各种典型机器学习场景,旨在挖掘数据中价值,提高数据应用和解决实际问题的能力。 在机器学习篇的题中,常见的任务包括分类、回归、聚类、推荐等,其中分类问题是最常见的任务之一。分类可以分为二分类、多分类、超大规模分类等多个子类型。对于分类问题,大家需要学习分类算法,如KNN、NB、SVM、LR、GBDT、XGBoost等,并熟悉如何调参等技巧。 回归问题主要是根据给定的样本数据,预测一个连续的数值。回归问题旨在找到独立变量(X)和连续依赖变量(Y)之间的关系,以便使用该模型来预测连续依赖变量的值。对于回归问题,大家需要掌握线性回归、岭回归、Lasso回归、ElasticNet回归等算法。 聚类问题是将相似的数据划分到同一类别中,相似度较高,不同类别之间相似度较低。对于聚类问题,大家需要学习如何使用K-means、DBSCAN、Hierarchical聚类算法。 推荐问题是根据用户的行为习惯,预测用户的需求,以便将相应的内容推荐给用户。推荐问题的数据通常包括用户的行为、物品的属性和用户的评分。推荐问题常用的算法包括CF、ALS、LFM等。除此之外,还有深度学习在图像识别、语音识别、自然语言处理、推荐、游戏AI等方面具有广泛的应用,如CNN、RNN、LSTM、GAN等。 总之,机器学习篇的题挑战涉及到各种典型机器学习算法和应用场景,需要大家掌握基础理论和实践技巧,并多参加实战项目和比练习,不断提升自己的能力和水平。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值