二分类Logistic回归模型

 Logistic回归属于概率型的非线性回归,分为二分类多分类的回归模型。这里只讲二分类。

  对于二分类的Logistic回归,因变量y只有“是、否”两个取值,记为1和0。这种值为0/1的二值品质型变量,我们称其为二分类变量

  假设在自变量$x_{1}, x_{2}, \cdots, x_{p}$作用下,y取“是”的概率是p,则取“否”的概率是1-p,研究的是当y取“是”发生的模率p与自变量$x_{1}, x_{2}, \cdots, x_{p}$的关系。

Logistic回归模型

①Logit变

  Logit 变换以前用于人口学领域,1970年被Cox引入来解决曲线直线化问题。

  通常把某种结果出现的概率与不出现的概率之比称为称为事件的优势比odds,即假设在p个独立自变量$x_{1}, x_{2}, \cdots, x_{p}$作用下,记y取1的概率是$p=P(y=1 | X)$,取0概率是$1-p$,取1和取0的概率之比为$\frac{p}{1-p}$。Logit变换即取对数:$$\lambda  = \ln ({\rm{ odds }}) = \ln \frac{p}{ {1 - p}}$$

②Logistic函数

  Logistic中文意思为“逻辑”,但是这里

  • 23
    点赞
  • 29
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
二分类Logistic回归模型是一种用于解决离散值分类问题的回归模型。它通过将线性模型的输出值通过Sigmoid函数映射到0到1之间的概率值,来进行分类。具体而言,Logistic回归模型使用回归系数对输入特征进行加权求和,并将结果通过Sigmoid函数进行转换,得到样本属于正类的概率。如果概率大于0.5,则将样本分类为正类,否则分类为负类。\[1\]\[3\] 在Logistic回归模型中,我们使用梯度下降算法来求解最优的回归系数。梯度下降算法的伪代码如下: 1. 初始化每个回归系数为1。 2. 重复R次: a. 计算整个数据集的梯度。 b. 使用学习率alpha乘以梯度来更新回归系数的向量。 3. 返回更新后的回归系数。\[2\] 在测试阶段,我们可以使用权重w对样本x进行分类。通过将样本特征与回归系数相乘并经过Sigmoid函数,得到样本属于正类的概率。如果概率大于0.5,则将样本分类为正类,否则分类为负类。\[3\] #### 引用[.reference_title] - *1* [小白的机器学习笔记(八)----Logistic回归处理二分类](https://blog.csdn.net/qq_41641805/article/details/81514851)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [机器学习(五)logistic回归进行二分类以及多分类(Python代码)](https://blog.csdn.net/m0_52043037/article/details/128223158)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值