机器学习(14)---逻辑回归(含手写公式、推导过程和手写例题)


一、逻辑回归概述

 1. 逻辑回归也称作logistic回归分析,是一种广义的线性回归分析模型,属于机器学习中的监督学习。其推导过程与计算方式类似于回归的过程,但实际上主要是用来解决二分类问题(当然也可以解决多分类问题)。

 2. 二分类问题只有两个类别。对于类别我们通常称为正类(positive class)和负类(negative class)。 (1)例如,我们给出一个人的 [身高,体重] 这两个指标,然后判断这个人是属于”胖“还是”瘦“这一类。对于这个问题,我们可以先测量n个人的身高、体重以及对应的指标”胖“,"瘦”,把胖和瘦分别用0和1来表示,把这n组数据输入模型进行训练。训练之后再把待分类的一个人的身高、体重输入模型中,看这个人是属于“胖”还是“瘦”。 (2)例如:一个垃圾邮件过滤系统,x是邮件的特征,预测的y值就是邮件的类别(是垃圾邮件还是正常邮件),在该例子中,正类就是正常邮件,负类就是垃圾邮件。

在这里插入图片描述

二、模型、策略和优化(手写)

在这里插入图片描述

三、w和b的梯度下降公式推导

在这里插入图片描述

四、例题分析

4.1 题目

在这里插入图片描述

4.2 解答

在这里插入图片描述

  • 2
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
DBSCAN算法是一种基于密度的聚类算法,它将数据点分为核心点、边界点和噪声点三类。在手算DBSCAN算法时,需要先确定两个参数:半径ε和最小点数MinPts。然后按照以下步骤进行: 1. 随机选择一个未被访问的数据点p; 2. 以p为中心,以半径ε为半径画一个圆,统计圆内的数据点个数n; 3. 如果n小于最小点数MinPts,则将p标记为噪声点; 4. 否则,以p为核心点,将p加入当前簇,并将圆内的所有点加入当前簇; 5. 递归地处理当前簇中所有密度可达的点,直到当前簇中的所有点都被访问过; 6. 重复以上步骤,直到所有点都被访问过。 下面是一个手算DBSCAN算法的例子: 假设有如下10个数据点: A(1, 2), B(2, 1), C(2, 3), D(3, 2), E(4, 2), F(5, 2), G(6, 2), H(7, 2), I(8, 2), J(9, 2) 设半径ε=2,最小点数MinPts=3。 首先随机选择一个未被访问的数据点A,以A为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将A标记为噪声点。 接下来选择B,以B为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将B标记为噪声点。 选择C,以C为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=3,大于等于MinPts=3,因此以C为核心点,将C、D、E加入当前簇。 递归地处理当前簇中所有密度可达的点,发现没有其他点与C、D、E密度可达,因此当前簇处理完毕。 选择F,以F为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将F标记为噪声点。 选择G,以G为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将G标记为噪声点。 选择H,以H为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将H标记为噪声点。 选择I,以I为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将I标记为噪声点。 选择J,以J为中心,以半径2为半径画一个圆,统计圆内的数据点个数n=2,小于MinPts=3,因此将J标记为噪声点。 最终得到的聚类结果为:{C, D, E}。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

冒冒菜菜

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值