分类变量的压缩


建模的时候,用到的是连续变量,对于本身是连续变量的变量,可通过主成分以及变量聚类来减少变量数量,对于本身是分类变量的变量,可通过重编码或WOE转换以减少建模的难度,不要把变量的压缩都放到建模后期,那样很耗时。


###重编码
查看所有变量出现的次数,将那些出现次数过少的,例如0,1次的归为一类,以减少分类变量的数量。(这些数量为0的出现,在取后面WOE转换取对数的时候会出问题。)

accepts <- read.csv("accepts.csv")
table(accepts$vehicle_make,accepts$bad_ind)
                     #与目标变量求交叉表,查看数据是否存在似不完整性问题
library(sqldf)
freq<-data.frame(table(accepts$vehicle_make))
names(freq)<-c("vehicle_make","freq")
accepts1<-sqldf("select a.*,b.freq
                  from accepts as a
                  left join freq as b 
                  on a.vehicle_make=b.vehicle_make")
accepts1$vehicle_make<-as.character(accepts1$vehicle_make)
accepts1[accepts1$freq<10,]$vehicle_make<-"other"
                     #将出现次数低于10次的都归为一类

###WOE转换-证据权重转换
重编码可减少水平数量,但是

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值