spark 逻辑回归算法案例_spark mllib 分类预测之逻辑回归

该博客通过一个案例展示了如何利用Spark MLlib的LogisticRegressionWithSGD进行逻辑回归算法,用于预测胃癌是否发生转移。数据包括患者的年龄、VEGF表达等级、组织内微血管数、细胞核组织学分级和癌症分期等特征。博客中提供了完整的Spark Scala代码,用于数据加载、训练模型、评估精度,并对新患者数据进行预测。
摘要由CSDN通过智能技术生成

胃癌转移数据说明

肾细胞癌转移情况(有转移 y=1,无转移 y=2)

x1:确诊时患者年龄(岁)

x2:肾细胞癌血管内皮生长因子(VEGF),其阳性表述由低到高共3个等级

x3:肾细胞癌组织内微血管数(MVC)

x4:肾癌细胞核组织学分级,由低到高共4级

x5:肾细胞癌分期,由低到高共4级

y x1 x2 x3 x4 x5

0 59 2 43.4 2 1

运行代码如下

package spark.logisticRegression

import org.apache.spark.mllib.classification.LogisticRegressionWithSGD

import org.apache.spark.mllib.evaluation.MulticlassMetrics

import org.apache.spark.mllib.linalg.Vectors

import org.apache.spark.mllib.regression.LabeledPoint

import org.apache.spark.mllib.util.MLUtils

import org.apache.spark.{SparkConf, SparkContext}

/**

* MLLib分类,逻辑回归,是分类,不是回归

* 胃癌转移判断

* Created by eric on 16-7-17.

*/

object LogisticRegression4 {

val conf = new SparkConf() //创建环境变量

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值