基于LSTM算法的电影推荐系统的设计与实现-CSDN博客

本文链接：https://blog.csdn.net/m0_58847451/article/details/148239170

本项目是一个基于长短期记忆网络（LSTM）算法的电影推荐系统的设计与实现，目的是提升传统推荐系统在动态用户兴趣建模方面的表现，避免“信息茧房”问题，提升用户体验。该项目使用MovieLens数据集，在PyTorch框架下开发，结合了协同过滤、内容推荐和注意力机制构建混合推荐模型，并通过TensorRT进行模型加速部署。
系统涵盖用户行为建模、数据预处理、推荐算法设计、可视化展示、冷启动处理等核心功能。

一. 🦁 前言

本系统旨在为流媒体平台用户提供个性化电影推荐，解决静态推荐模型无法捕捉用户兴趣动态变化的痛点。核心技术为LSTM与注意力机制，结合内容与行为数据，实现兴趣演变建模。

二. 🦁 开源代码与组件使用情况说明

使用 PyTorch 实现深度学习模型（LSTM、注意力机制等）
使用 TensorRT 实现部署加速
使用 FastAPI 搭建Web服务
使用 Jinja2 实现前端模板渲染
使用 MovieLens 数据集 作为推荐训练数据源

三. 🦁 核心功能

1. LSTM兴趣建模

通过LSTM处理用户观影历史序列，建模其长期与短期兴趣变化；采用单向LSTM结构以匹配用户兴趣的时间演进特点。
在这里插入图片描述

2. 注意力机制

注意力机制是序列模型的关键增强部分，它使模型能够识别并强调历史行为中的重要项目，从而提供更精准的推荐。系统实现了简洁高效的注意力层，通过计算权重分布突出关键信息。

class AttentionLayer(nn.Module):
    """用于突出显示重要序列元素的注意力层"""
    def __init__(self, hidden_dim, attention_dim):
        super(AttentionLayer, self).__init__()
        self.attention = nn.Sequential(
            nn.Linear(hidden_dim, attention_dim),
            nn.Tanh(),
            nn.Linear(attention_dim, 1)
        )
    def forward(self, hidden_states):
        # 计算注意力分数
        attention_scores = self.attention(hidden_states)  # [batch_size, seq_len, 1]
        
        # 应用softmax获取注意力权重
        attention_weights = torch.softmax(attention_scores, dim=1)
        ...

注意力层的实现采用了经典的双层前馈网络结构，中间使用Tanh激活函数，平衡了表达能力与计算复杂度，能够有效捕捉序列内部的重要性分布。
在这里插入图片描述

3. 混合推荐策略

融合协同过滤、基于内容的推荐及LSTM预测结果；为不同用户状态动态分配推荐权重，缓解冷启动问题。

# 融合所有特征 - 确保所有张量都是2D [batch_size, feature_dim]
fusion_features = torch.cat([
    context_vector,  # [batch_size, lstm_hidden_dim]
    user_embeddings,  # [batch_size, embedding_dim]
    movie_embeddings,  # [batch_size, embedding_dim]
    movie_features_transformed,  # [batch_size, embedding_dim]
    user_features_transformed,  # [batch_size, embedding_dim]
    context_features_transformed  # [batch_size, embedding_dim/2]
], dim=1)

4. 数据处理模块

实现数据清洗、评分归一化、时间特征周期性编码、用户行为序列构建、滑动窗口序列生成等。

5. 冷启动处理机制

采用三级处理策略：

无评分用户返回热门电影；
有少量行为则增强内容推荐；
针对新电影使用内容特征表示。

def get_recommendations(self, user_id, n=10, exclude_rated=True):
    """为用户生成电影推荐
    
    Args:
        user_id: 用户ID
        n: 推荐数量
        exclude_rated: 是否排除已评分电影
    Returns:
        recommendations: 推荐列表或错误信息
    """
    try:
        # ...随机种子设置
        # 获取用户历史
        user_history = self.rating_manager.get_user_history(user_id)
        
        # 检查是否有足够的历史记录
        if not user_history:
            return {'error': f"用户 {user_id} 没有足够的评分历史进行推荐，请先评分一些电影"}

对于有限历史的新用户，系统增强了基于内容的推荐权重。通过分析用户已评分电影的类型分布，识别潜在偏好，然后优先推荐符合这些偏好的未评分电影。系统不仅提取了每部已评分电影的类型，还构建了完整的类型统计，识别用户的主导偏好。这种基于内容的引导机制能够快速捕捉新用户的兴趣方向，提供相关且多样的初始推荐。
已评分电影排除是冷启动阶段的重要优化。系统构建已评分电影集合，确保这些电影不再出现在推荐列表中，避免了信息冗余与用户困惑。候选电影分组展示了算法的智能适应性——对于新用户，系统增加了来自preferred_candidates的比例，确保初始推荐更符合已表达偏好；随着用户评分增加，系统逐步增加other_candidates的比例，提升推荐多样性。这种渐进式策略平衡了初期相关性与长期探索性，有效解决了冷启动-稳定推荐的平滑过渡问题。
新电影处理是冷启动问题的另一维度。对于新上线或评分稀少的电影，系统增强了内容特征的影响力，通过类型、年份等元数据判断其与用户偏好的匹配度。这种双向冷启动处理确保了系统在各种数据稀疏场景下的适应能力，为用户和内容提供了进入推荐循环的有效路径。