数据挖掘课程设计成品

钟鱼但不是终于

已于 2024-10-10 16:32:12 修改

阅读量754

点赞数 25

文章标签：数据挖掘人工智能 python 算法数据结构线性回归

于 2024-07-12 10:44:10 首次发布

本文链接：https://blog.csdn.net/weixin_45473052/article/details/140372583

版权

目前有四个课设成品

《基于LSTM的股票预测》

通过调用tushare库，该库是一个用于获取中国股票市场数据的Python库。

调用ts.pro_bar()接口将数据存储在df中

再编写爬虫脚本，用于从Tushare获取基金数据，并对获取到的数据进行处理和存储。

从原始数据集（存储在变量dataset中）删除了与目标任务无关的列（如 'label', 'ts_code'和'trade_date'），然后将结果存储在features_close中。然后，目标标签（即 'close' 列，可能表示某种金融产品的收盘价）被提取并存储在label_close中。

将features_close和label_close数据集根据训练样本的数量划分为训练集（training_set和train_label）和测试集（test_set和test_label）。前2000个样本用于训练，剩余的样本用于测试。

在完成数据集划分后，接下来的部分是对两个数据集进行可视化。通过matplotlib库实现，创建了两个子图。在第一个子图中，蓝色曲线代表训练集中的第一个特征随时间变化的趋势。在第二个子图中，红色曲线代表测试集中的第一个特征随时间变化的趋势。通过这样的方式，我们可以直观地理解训练集和测试集的特征分布差异。

《基于Pytorch的FM对电影评分的预测》

推荐系统是一种信息过滤技术，旨在根据用户的历史行为、偏好和其他相关数据，向用户推荐他们可能感兴趣的物品或服务。推荐系统广泛应用于电子商务、社交媒体、内容推荐等领域，极大地提升了用户体验和平台的用户黏性。

因子分解机（Factorization Machines，FM）是一种强大的推荐算法，能够有效地处理高维稀疏数据，并且能够捕捉到特征之间的二阶交互作用。FM 模型在推荐系统中表现出色，尤其适用于用户-物品评分预测任务。推荐系统中的数据通常是稀疏的，FM 模型通过分解的方式能够高效处理这种数据。相比于传统的线性模型，FM 模型能够捕捉到特征之间的二阶交互作用，从而提升推荐效果。FM 模型不仅适用于评分预测任务，还可以应用于点击率预估等其他预测任务。

1.2数据来源

本次项目使用的数据集来自国外网站（https://grouplens.org/datasets/movielens/）由GroupLens Research 从 MovieLens 网站（https://movielens.org）收集并提供了评级数据集。MovieLens 25M 电影评分。稳定的基准数据集。 162,000 名用户对 62,000 部电影应用了 2500 万次评分和 100 万次标签应用程序。包括标签基因组数据，在 1,129 个标签中具有 1500 万个相关性分数。2019 年 12 月发布。

1.3项目目标

本项目的主要目标是基于 PyTorch 框架实现因子分解机（FM）模型，并利用该模型对用户电影评分进行预测。具体目标包括：

数据预处理：清洗和处理原始数据集，生成训练集和测试集。

模型实现：使用 PyTorch 构建 FM 模型，包括模型的初始化、前向传播和参数更新。

模型训练：在训练集上训练 FM 模型，并在测试集上评估模型性能。

模型评估：使用均方根误差（RMSE）等指标评估模型的预测效果，并分析模型的性能和误差来源。

《基于RFM的用户消费行为分析》

电商是当今用户最大的交易市场之一，电商行业也逐渐成熟，所有市场中可售卖的商品全都在平台中存在，并且在网络和疫情的影响下，在线上的消费行为满足全年龄段用户。用户的交易行为推动了电商的发展。对于电商平台来说，通过用户的交易行为、交易金额、交易频率、交易时间等信息，分析用户的行为，可促进二次营销，精准营销，促活等。

本文基于用户网上购物行为数据集，对电商平台用户的消费行为进行统计分析并可视化；然后根据用户的交易行为数据构造用户、商户和优惠券等有效特征；完成特征工程后，本文基于 RFM 模型进行客户价值分析，使用 K 均值聚类分析，并绘制用户画像分析用户特点；最后构建随机森林模型并训练，预测是否为该用户发放优惠券并评估模型性能。

《旅游网站评论的主题识别和情感分析》

去哪儿网（Qunar.com）是中国领先的一站式旅行平台。去哪儿网站上线于2005年5月，2010年去哪儿旅行App面世。成立至今，去哪儿坚持以低价为核心竞争力，帮助更多用户解锁“人生第一张机票”。截至目前，去哪儿已拥有超两亿交易用户，并以年新增交易用户逾千万的规模持续增长。

选取的旅游地为厦门市，简称“厦”或“鹭”，福建省辖地级市、副省级市、计划单列市、Ⅰ型大城市，位于中国华东地区、福建省东南部沿海，与漳州市、泉州市相连，地形以滨海平原、台地和丘陵为主，属南亚热带海洋性季风气候，温和多雨。厦门市是国务院批复确定的中国经济特区和东南沿海重要的中心城市、港口及风景旅游城市。厦门市的主要旅游景点包括鼓浪屿、南普陀寺、厦门大学、环岛路等，这些景点每年都吸引了大量的国内外游客，产生了丰富的旅游数据。