数据挖掘
weixin_43520514
这个作者很懒,什么都没留下…
展开
-
天池二手车预测:建模调参
0.基础知识学习(1)线性回归模型:线性拟合,梯度下降调参,正态分布(2)决策树模型:西瓜书 第四章 决策树学习(3)梯度提升树GBDT学习CART树:二分树,通过寻找最优特征及其最佳切分点划分输入空间 + 剪枝操作GBDT模型是集成模型,是很多CART树的线性相加(4)XGboost模型(5)LightGBM模型import pandas as pdimport numpy ...原创 2020-04-01 16:29:33 · 270 阅读 · 0 评论 -
天池二手车预测:特征工程
特征工程1. 特征工程目标及主要工作特征工程的目标主要是对特征进行进一步的分析和构造,将数据转换为能更好的表示潜在问题的特征,从而提升机器学习的性能常见的主要工作包括:异常处理:通过箱线图(或 3-Sigma)分析删除异常值;BOX-COX 转换(处理有偏分布);长尾截断;特征归一化/标准化:标准化(转换为标准正态分布);归一化(抓换到 [0,1] 区间);针对幂律分布...原创 2020-03-28 16:01:49 · 307 阅读 · 0 评论 -
天池二手车价格预测:数据的探索性分析(EDA)
1. 数据的探索性分析理解数据探索在机器学习中我们一般称为EDA(Exploratory Data Analysis):是指对已有的数据(特别是调查或观察得来的原始数据)在尽量少的先验假定下进行探索,通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。EDA的主要工作包括:(1)数据的初步分析:样本数量,训练集数量,是否有时间特征,是否是时序问题,特征所表示的...原创 2020-03-24 16:50:21 · 277 阅读 · 0 评论