AI-矩阵分解和梯度下降

本文探讨了AI的核心要素——算法、算力和数据,并重点介绍了矩阵分解在推荐系统中的作用。矩阵分解通过P和Q矩阵近似原始评分矩阵,用于预测用户对未评分项的评分。同时,讲解了梯度下降法,作为优化损失函数以求得最佳参数的方法。在实践中,通过Python代码实现预测值与真实值的逼近。
摘要由CSDN通过智能技术生成

一、矩阵分解

1、AI=算法(经典+人工智能)+算力(巨型机可实现)+数据
2、推荐系统是协同过滤算法的典型应用场景,可用于对未评分物品进行评分的预测;矩阵分解是基础。
3、矩阵分解的过程中,原始的评分矩阵
在这里插入图片描述
可以近似表示为 P(m,K)和Q(K,n)的乘积,并且矩阵的预测值可以表示为
在这里插入图片描述
4、预测值可近似为真实值,求出矩阵P和Q即可,使用构造损失函数的方法:
(1)损失函数(loss):评分矩阵真实值与预测值差的平方;
(2)保证构造的损失函数值越来越小。
5、Python代码如下:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

二、梯度下降

1、一元函数:梯度是该函数的导数,相当于斜率;二元函数:梯度是该函数的偏导数:
在这里插入图片描述
2、若需要找的是函数极小点,应从负梯度的方向寻找,该方法称之为梯度下降法,反之为梯度上升法。
3、梯度下降法公式:
在这里插入图片描述
4、梯度下降法步骤:
(1)设定两个较小的正数η,ε
(2)求此时的各个偏导数
(3)代入梯度下降公式,求出参数变化量
(4)若(3)中变化量小于ε,退出;否则返回(2)

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值