吴恩达机器学习课程笔记+代码实现(25)16.推荐系统(Recommender Systems)

16.推荐系统(Recommender Systems)

---

---

本章编程作业及代码实现部分见:

16.1 问题形式化

       我们从一个例子开始定义推荐系统的问题。

       假使我们是一个电影供应商，我们有 5 部电影和 4 个用户，我们要求用户为电影打分。
       
       前三部电影是爱情片，后两部则是动作片，我们可以看出Alice和Bob似乎更倾向与爱情片， 而 Carol 和 Dave 似乎更倾向与动作片。并且没有一个用户给所有的电影都打过分。我们希望构建一个算法来预测他们每个人可能会给他们没看过的电影打多少分，并以此作为推荐的依据。

       下面引入一些标记：

       $n_u$ 代表用户的数量

       $n_m$ 代表电影的数量

       $r(i,j)$ 如果用户j给电影 $i$ 评过分则 $r(i,j)=1$

       $y^{(i,j)}$ 代表用户 $j$ 给电影$i$的评分

       $m_j$代表用户 $j$ 评过分的电影的总数

16.2 基于内容的推荐系统

       在一个基于内容的推荐系统算法中，我们假设对于我们希望推荐的东西有一些数据，这些数据是有关这些东西的特征。

       在我们的例子中，我们可以假设每部电影都有两个特征，如$x_1$代表电影的浪漫程度，$x_2$ 代表电影的动作程度。
       

       则每部电影都有一个特征向量，如$x^{(1)}$是第一部电影的特征向量为[0.9 0]。

       下面我们要基于这些特征来构建一个推荐系统算法。
       假设我们采用线性回归模型，我们可以针对每一个用户都训练一个线性回归模型，如${\theta }^{(1)}$是第一个用户的模型的参数。
       于是，我们有：

       ${\theta }^{(j)}$用户 $j$ 的参数向量

       $x^{(i)}$电影 $i$ 的特征向量

       对于用户 $j$ 和电影 $i$，我们预测评分为：$({\theta }^{(j)}{)}^T{x}^{(i)}$

       代价函数

       针对用户 $j$，该线性回归模型的代价为预测误差的平方和，加上正则化项：
$$\underset{\theta (j)}{\min }\frac{1}{2}\sum _{i:r(i,j)=1}{\left(({\theta }^{(j)}{)}^T{x}^{(i)}-y^{(i,j)}\right)}^2+\frac{\lambda }{2}{\left({\theta }_k^{(j)}\right)}^2$$

       其中 $i:r(i,j)$表示我们只计算那些用户 $j$ 评过分的电影。在一般的线性回归模型中，误差项和正则项应该都是乘以$1/2m$，在这里我们将$m$去掉。并且我们不对方差项${\theta }_0$进行正则化处理。

       上面的代价函数只是针对一个用户的，为了学习所有用户，我们将所有用户的代价函数求和：
min ⁡ θ ( 1 ) , . . . , θ ( n u ) 1 2 ∑ j = 1 n u ∑ i : r ( i , j ) = 1 ( ( θ ( j ) ) T x ( i ) − y ( i , j ) ) 2 + λ 2 ∑ j = 1 n u ∑ k = 1 n ( θ k ( j ) ) 2 \min_{\theta^{(1)},...,\theta^{(n_u)}} \frac{1}{2}\sum_{j=1}^{n_u}\sum_{i:r(i,j)=1}\left((\theta^{(j)})^Tx^{(i)}-y^{(i,j)}\right)^2+\frac{\lambda}{2}\sum_{j=1}^{n_u}\sum_{k=1}^{n}(\theta_k^{(j)})^2 θ(1),...,θ(nu​)min​21​j=1∑nu​​i:r(i,j)=1∑​((θ(j))Tx(i)−y(i,j))2+2λ​j=1∑n