初学者对K近邻分类算法的理解与matlab平台上的实现

     刚接触machine learning,本着对接触到算法都自己编写一遍以帮助理解的理念,今日便将学习第一个算法(knn分类算法)的过程在这里记录下来,与大家分享,错误之处还希望大家指正哈。

    k近邻分类算法应该是一个比较基础的算法了,当初接触spectral clustering 时就用过它,但当时是直接调用的,自己并没有去认真的编写。废话不多讲了,下面是正文。

    Knn近邻算法的基本原理是利用当前数据x与数据样本y中的距离最近的k个样本记录,依据这k个样本记录中大多数所属的类别来确定数据x的类别,其中数据x与数据样本需要有相同数目的属性,即列数相同(一般矩阵的列表示属性,一列代表一个属性,矩阵的行则一般代表数据样本的一组属性观测值)。比如数据x有x1,x2,x3...xn个属性,则样本数据y也有n个属性相对应,而且数据样本y中的每行已经被正确分类。

   下面粘贴 在matlab上实现的代码

 比较笨,这么短的代码撸了一个下午。代码中计算距离使用的是欧式距离,确定待分类数据的类别采用的是 k个最近邻居中大多数属于哪一个类,则判定待分类数据的类别,是不是感觉很粗糙? 对啊,我也是这么觉得的,下面我们来粗略分析下。

     suppose训练数据共有100个记录,共分为2类,

  • 1
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
分治和递归算法是计算机科学中的两种重要算法思想,它们可以帮助我们解决很多复杂的问题。下面我介绍一下这两种算法以及它们在Java中的实现。 1. 分治算法 分治算法是指将一个大问题分成若干个小问题,然后逐个解决这些小问题,最后将所有小问题的解合并起来得到大问题的解。分治算法通常采用递归的方式来实现。 Java代码示例: ```java public int divideAndConquer(int[] nums, int left, int right){ if(left == right) return nums[left]; // 如果数组只有一个元素,则直接返回该元素 int mid = (left + right) / 2; // 将数组分成两部分 int leftSum = divideAndConquer(nums, left, mid); // 递归求解左半部分的和 int rightSum = divideAndConquer(nums, mid + 1, right); // 递归求解右半部分的和 return leftSum + rightSum; // 合并左右两部分的和 } ``` 上面的代码实现了求解一个数组中所有元素的和的问题。首先将数组分成两部分,然后递归地求解左右两部分的和,最后将左右两部分的和合并起来得到整个数组的和。 2. 递归算法 递归算法是指在函数的定义中调用自身的算法。递归算法通常用于解决具有递归结构的问题,比如树和图等数据结构。递归算法需要满足两个条件:基本情况和递归情况。 Java代码示例: ```java public int fibonacci(int n){ if(n <= 1) return n; // 基本情况 return fibonacci(n-1) + fibonacci(n-2); // 递归情况 } ``` 上面的代码实现了求解斐波那契数列的第n项的值的问题。斐波那契数列中的第一项和第二项都是1,从第三项开始,每一项都是前两项的和。递归算法中,基本情况是当n小于等于1时直接返回n,递归情况是求解前两项的和,然后递归求解前两项中的每一项。 希望这些示例代码能够帮助你理解分治和递归算法的基本思想和Java实现方式。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值