![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Datawhale CV入门比赛
微萧默
这个作者很懒,什么都没留下…
展开
-
零基础入门金融风控之贷款违约预测挑战赛-task05模型融合
目录1.模型融合方式1.1 平均:1.2 投票:1.3 综合:2. stacking\blending详解零基础入门金融风控之贷款违约预测挑战赛1.模型融合方式1.1 平均:简单平均法pre = (pre1 + pre2 + pre3 +...+pren )/n加权平均法pre = 0.3pre1 + 0.3pre2 + 0.4pre3 1.2 投票:简单投票法from xgboost import XGBClassifierfrom sklearn.linear_model im原创 2020-09-25 11:11:19 · 387 阅读 · 0 评论 -
零基础入门金融风控之贷款违约预测挑战赛-task04特征工程
目录1 模型介绍2 模型对比2.1 逻辑回归2.2 决策树模型2.3 集成模型集成方法(ensemble method)3 模型评估4.代码5 模型调参5.1 贪心调参5.2 网格搜索5.3 贝叶斯调参零基础入门金融风控之贷款违约预测挑战赛1 模型介绍1.1 逻辑回归模型1.2 决策树模型1.3 GBDT模型1.4 XGBoost模型1.5 LightGBM模型1.6 Catboost模型1.7 时间序列模型2 模型对比2.1 逻辑回归优点训练速度较快,分类的时候,计算量仅仅只和特原创 2020-09-24 20:28:39 · 180 阅读 · 0 评论 -
零基础入门金融风控之贷款违约预测挑战赛-task03特征工程
目录1.数据预处理2.异常值处理2.1 检测异常的方法一:均方差2.2 检测异常的方法二:箱型图3.数据分箱3.1固定宽度分箱3.2分位数分箱3.3 卡方分箱及其他分箱方法的尝试4.特征编码5.特征选择5.1 Filter 基于特征间的关系进行筛选5.1.1 方差选择法5.1.2相关系数法5.1.3 卡方检验5.1.4 互信息法5.2 Wrapper (Recursive feature elimination,RFE)5.3 Embedded5.3.1 基于惩罚项的特征选择法5.3.2 基于树模型的特征选原创 2020-09-15 22:16:35 · 377 阅读 · 0 评论 -
零基础入门金融风控之贷款违约预测挑战赛-task02数据分析
零基础入门金融风控之贷款违约预测挑战赛-task02数据分析零基础入门金融风控之贷款违约预测挑战赛目录零基础入门金融风控之贷款违约预测挑战赛-task02数据分析1.读取数据集进行粗略了解1.1 导入所需库1.2 读取数据文件1.3 总体了解2.查看缺失值、唯一值3. 查看特征的数值类型、对象类型4.变量分布可视化4.1 单一变量分布可视化4.2 根绝y值不同可视化x某个特征的分布4.3 时间格式数据处理及查看4.4 掌握透视图可以让我们更好的了解数据4.5 生成数据报告1.读取数据集进行粗略了解1原创 2020-09-15 13:50:38 · 251 阅读 · 0 评论 -
零基础入门金融风控之贷款违约预测挑战赛-task01
零基础入门金融风控之贷款违约预测挑战赛-task01零基础入门金融风控之贷款违约预测挑战赛1.赛题描述根据某信贷平台的贷款记录的数据,进行训练测试,预测用户贷款是否违约,得出用户违约的概率。在给出的数据中,总数据量超过120w,包含47列变量信息,其中15列为匿名变量。为了保证比赛的公平性,将会从中抽取80万条作为训练集,20万条作为测试集A,20万条作为测试集B,同时会对employmentTitle、purpose、postCode和title等信息进行脱敏。2.数据信息train.csv原创 2020-09-15 11:22:57 · 539 阅读 · 0 评论 -
Datawhale 计算机视觉基础-图像处理(下)-Task04 HOG特征描述算子-行人检测
Datawhale 计算机视觉基础-图像处理(下)-Task04 HOG特征描述算子-行人检测目录Datawhale 计算机视觉基础-图像处理(下)-Task04 HOG特征描述算子-行人检测1. HOG特征介绍1.1 HOG简介1.2 HOG特征的原理1.2.1 图像预处理1.2.2 计算图像梯度1.2.3 计算梯度直方图1.2.4 block归一化1.2.5 HOG描述子2.opencv实现本次任务将学习一种在深度学习之前非常流行的图像特征提取技术——方向梯度直方图(Histogram of Ori原创 2020-07-04 17:27:37 · 398 阅读 · 0 评论 -
Datawhale 计算机视觉基础-图像处理(下)-Task03 Haar特征描述算子-人脸检测
Datawhale 计算机视觉基础-图像处理(下)-Task03 Haar特征描述算子-人脸检测目录Datawhale 计算机视觉基础-图像处理(下)-Task03 Haar特征描述算子-人脸检测1. Haar特征描述原理1.1 Haar-like特征1.2 Haar分类器训练2.opencv代码实现1. Haar特征描述原理1.1 Haar-like特征Haar(哈尔)特征分为三类:边缘特征、线性特征、中心特征和对角线特征,组合成特征模板。特征模板内有白色和黑色两种矩形,并定义该模板的特征值为白色原创 2020-06-29 11:23:44 · 4217 阅读 · 0 评论 -
Datawhale计算机视觉基础-图像处理(下)-Task02 LBP特征描述算子-人脸检测
Datawhale计算机视觉基础-图像处理(下)-Task02 LBP特征描述算子-人脸检测1. LBP原理介绍1.1 LBP原理简介LBP指局部二值模式(Local Binary Pattern),是一种用来描述图像局部特征的算子,具有灰度不变性和旋转不变性等显著优点。LBP常应用于人脸识别和目标检测中,在OpenCV中有使用LBP特征进行人脸识别的接口,也有用LBP特征训练目标检测分类器的方法,OpenCV实现了LBP特征的计算,但没有提供一个单独的计算LBP特征的接口。也就是说OpenCV中使用原创 2020-06-28 17:01:00 · 143 阅读 · 0 评论 -
Datawhale 计算机视觉基础-图像处理(下)- Task01 Harris特征点检测器-兴趣点检测
Datawhale 计算机视觉基础-图像处理(下)- Task01 Harris特征点检测器-兴趣点检测1. 基础知识1.1角点的介绍2.Harris角点检测算法原理2.1 算法核心思想2.2 算法原理3.OpenCV实现3.1 API3.2 代码示例参考链接1. 基础知识1.1角点的介绍在图像处理领域中,特征点又被称为兴趣点或者角点,它通常具有旋转不变性和光照不变性和视角不变性等优点,是图像的重要特征之一,常被应用到目标匹配、目标跟踪、三维重建等应用中。点特征主要指图像中的明显点,如突出的角点、边原创 2020-06-23 11:10:17 · 978 阅读 · 0 评论 -
Datawhale 零基础入门CV赛事-Task03:字符识别模型
Datawhale 零基础入门CV赛事-Task03:字符识别模型学习目标学习CNN基础知识和原理使用Pytorch框架构建CNN模型,并完成训练字符识别模型CNN介绍CNN,它的全称是Convolutional Neural Networks,卷积神经网络,是一类包含卷积计算且具有深度结构的前馈神经网络,是深度学习中尤为重要的算法。CNN发展(1)LeNet(2)AlexNet(3)VGG(4)GoogleNet(5)ResNet(6)GAN不同的网络有不同的优点和缺点,适用的原创 2020-05-25 23:51:40 · 200 阅读 · 0 评论 -
Datawhale 零基础入门CV赛事-Task2 数据读取与数据扩增
Datawhale 零基础入门CV赛事-Task2 数据读取与数据扩增学习目标1.Python中的图像读取2.数据扩增方法学习目标学习Python和Pytorch中图像读取学会扩增方法和使用Pytorch读取赛题数据1.Python中的图像读取在python中进行图像读取的方法有多种,这里介绍两种图像读取方法(1)在python中利用pillow库进行图像读取操作import numpy as npfrom PIL import Image# 打开图像im = Image.open('D原创 2020-05-24 23:35:46 · 143 阅读 · 0 评论 -
Datawhale 零基础入门CV赛事-Task1 赛题理解
Datawhale 零基础入门CV赛事-Task1 赛题理解Datawhale 零基础入门CV赛事——街景字符识别比赛赛事理解赛题目标:通过这道赛题可以引导大家走入计算机视觉的世界,主要针对竞赛选手上手视觉赛题,提高对数据建模能力。赛题任务:赛题以计算机视觉中字符识别为背景,要求选手预测街道字符编码,这是一个典型的字符识别问题。为了简化赛题难度,赛题数据采用公开数据集SVHN,因此大家可以选择很多相应的paper作为思路参考。赛题名称: 零基础入门CV之街道字符识别赛题目标: 通过这道赛题可以原创 2020-05-20 19:26:01 · 178 阅读 · 0 评论