libsvm处理多分类的问题

SVM作为判别模型(discriminative model)中所使用的典型方法,其产生是为2分类问题设计的


svm多分类效果不佳,目前是svm研究的热点之一。libsvm用的是one- versus-one法。
简介:
.一对一法(one-versus-one,简称OVO SVMs或者pairwise)。其做法是在任意两类样本之间设计一个SVM,因此k个类别的样本就需要设计k(k-1)/2个SVM。当对一个未知样本 进行分类时,最后得票最多的类别即为该未知样本的类别。Libsvm中的多类分类就是根据这个方法实现的。

还是假设有四类A,B,C,D 四类。在训练的时候我选择A,B; A,C; A,D; B,C; B,D;C,D所对应的向量作为训练集,然后得到六个训练结果,在测试的时候,把对应的向量分别对六个结果进行测试,然后采取投票形式,最后得到一组结 果。

投票是这样的.
A=B=C=D=0;
(A, B)-classifier 如果是A win,则A=A+1;otherwise,B=B+1;
(A,C)-classifer 如果是A win,则A=A+1;otherwise, C=C+1;
...
(C,D)-classifer 如果是A win,则C=C+1;otherwise,D=D+1;
The decision is the Max(A,B,C,D)

  • 3
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 8
    评论
Libsvm中实现多类分类问题通常有两种方法:一对多(OvM)和一对一(OvO)。 一对多方法将多类问题转化为多个二元分类问题。具体地,对于有k个类别的问题,我们将其转化为k个二元分类问题,每个问题都是将一个类别分类为正类,其余所有类别分类为负类。然后,我们使用Libsvm的二元分类器进行训练和预测。 一对一方法将多类问题转化为k(k-1)/2个二元分类问题。对于有k个类别的问题,我们将其转化为k(k-1)/2个二元分类问题,每个问题都是将两个不同的类别分别作为正类和负类。然后,我们使用Libsvm的二元分类器进行训练和预测。 下面是使用Libsvm进行多类分类的Python代码示例: ```python import svmutil # 加载数据 y, x = svmutil.svm_read_problem('train.txt') # 训练模型 model = svmutil.svm_train(y, x, '-c 4') # 预测测试集 ty, tx = svmutil.svm_read_problem('test.txt') p_label, p_acc, p_val = svmutil.svm_predict(ty, tx, model) ``` 在上面的代码中,我们使用了Libsvm提供的svm_read_problem函数来加载训练数据和测试数据。然后,我们使用svm_train函数训练模型,并使用svm_predict函数预测测试集。在训练和预测时,我们可以使用一对多或一对一方法来处理多类分类问题,只需要在训练和预测命令中设置相应的参数即可。 例如,如果我们使用一对多方法训练模型,我们可以将训练命令设置为`'-c 4 -v 5 -s 0 -h 0 -m 300'`,其中-s参数表示使用一对多方法,-v参数表示进行交叉验证,-h参数表示禁用Shrinking,-m参数表示设置内存限制。如果我们使用一对一方法训练模型,我们可以将训练命令设置为`'-c 4 -v 5 -s 1 -h 0 -m 300'`,其中-s参数表示使用一对一方法。 更多关于Libsvm的使用方法,请参考其官方文档:https://www.csie.ntu.edu.tw/~cjlin/libsvm/。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 8
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值