python基于爬虫的个性化书籍推荐系统

摘 要

近年来，随着互联网的蓬勃发展，企事业单位对信息的管理提出了更高的要求。以传统的管理方式已无法满足现代人们的需求。为了迎合时代需求，优化管理效率，各种各样的管理系统应运而生，随着各行业的不断发展，个性化书籍推荐系统建设也逐渐进入了信息化的进程。
这个系统的设计主要包括系统页面的设计和方便用户互动的后端数据库，而前端软件的开发则需要良好的数据处理能力、友好的界面和易用的功能。
数据要被工作人员通过界面操作传输至数据库中。通过研究，以MySQL为后端数据库，以PYTHON为前端技术，以IDEA为开发平台，采用DJANGO架构，建立一个提供个人中心、用户管理、书籍分类管理、热门书籍管理、公告栏管理、小说信息管理、在线反馈、系统管理等必要功能的、稳定的个性化书籍推荐系统。
关键词：书籍；DJANGO框架；MySQL数据库

1系统分析

3.1整体分析
系统的分析主要分为两种，一种是需求分析，需求分析的意义在于能更快地把这个系统的架构逻辑都整理分析清楚，另一种是功能分析，功能分析的意义在于分析如何更快地处理整个系统的细节部分。
根据查阅资料分析，个性化书籍推荐系统主要是每个内部使用，为使用者提供可视化的个性化书籍推荐信息来支撑服务。该系统管理系统的设计与实现主要是为了解决当前个性化书籍推荐信息管理繁杂的问题，实现高效率的规范化管理。本系统的设计实现不仅要满足当前的需要，还需具备良好的可发展性以满足未来发展的需要。
本系统通过分模块设计，主要实现个人中心、用户管理、书籍分类管理、热门书籍管理、公告栏管理、小说信息管理、在线反馈和系统管理的一体化管理。此外，该系统属于B/S结构，简单易上手，只需体验几次，用户就可以很熟练地使用各种功能。
3.2功能需求分析
本文将从个性化书籍推荐信息管理的需求和现状进行分析，使得本系统的设计实现具有可使用的价。做出一个实用性好的个性化书籍推荐系统，使其能满足用户的需求，并可以让用户更方便快捷地查找书籍信息。个性化书籍推荐系统的设计开发，目的主要是为了简化管理过程，使管理员更好地完成工作，在工作中实现高效快捷的管理效率。
本文从个性化书籍推荐信息管理的实际需要出发，为降低系统的耦合性，采用DJANGO框架集完成了系统总体架构的设计，以提高系统的重用性、可适用性及可维护性。
系统包括管理员和用户两个角色；
管理员用例如下所示：

图3-1 管理员用例图
用户用例如下所示：

图3-2 用户用例图
3.3 系统可行性分析
3.3.1技术可行性
技术可行性研究通过是否，在于对目前技术和硬件设备的剖析。系统软件开发应用的计算机语种是Python。Python语言从问世到现在不断强化，已经十分完善。运用覆盖面广，合乎开发必须。应用MySQL数据库作为数据储存，十分具有安全性，对配备规定低。这是一个经常使用的数据库。前端采用Python技术，就可以进行开发设计，让网页页面看上去又漂亮又大方，还方便维护。最终，开发环境是IDEA，因为其中包含框架和函数等等，可以立即应用。因此在技术方面是可行的。
3.3.2经济可行性
经济发展的可行性分析要从开发商的经济发展能力和用户必须的成本费2个层面来剖析。为了更好地减少项目成本，系统软件应用IDEA做为开源版本。数据库查询是开源MySQL数据库和配置好操作系统的电子计算机。用户通常挑选Tomcat 7.0做为系统软件所处的网络服务器，而电脑浏览器应用出色的IE、火狐和Google更全方位地展现CSS网页页面，进而推动系统升级维护保养，控制成本。如此看来，处于经济层面的考虑，进行开发没有阻碍。
3.3.3操作可行性
本系统选用B/S构造，用户不用安装其他软件就可以轻轻松松掌握和娴熟应用。与此同时，因为系统是应用Web技术，可以实现客户端的请求和服务器的端口组件，解决数据库文件的数据并回到结论。为了更好地组建和储存数据，数据库可以确保数据的一致性。一旦对数据开展操作，工作会越来越更简易，工作量也会降低。全部操作都由系统自身操纵。该系统大大减少了有关工作人员的工作量，也更便捷的让工作人员掌握具体操作全过程。既加速了工作效率，又下降了错误率。在操作上是可行的。
经过总结，该系统在经济、技术和操作方面都符合要求，并且是具有可行性的。
3.4系统流程分析
3.4.1操作流程
首先为系统登录页面。进入页面后，用户可进行登录和注册的操作。点击登录后，页面就会出现一个登录提示框，向用户传达信息：要进行用户名和密码的输入，完成后才可以进行下一步的操作。用户输入完成后，系统会将输入的信息提交给后台，与数据库中的信息记录进行比较判断。判断比较内容主要分为三个方面：从用户名是否为空、输入的密码是否为空、用户名和密码是否匹配三方面进行判断。只有上述三个条件同时满足，数据库中的信息匹配正确，才视为登陆成功，方可完成后续的操作。若以上三种情况有一条不满足，则会提示该次登录错误，就需要进行重新登录。系统登录流程图如图3-3所示：

图3-3登录流程图
3.4.2添加信息流程
然后是添加信息的页面。进入该页面后，页面会出现一个提示框，示意操作者可以进行信息的添加，从而进行下一步的操作。用户输入想要添加的信息后提交，系统会对输入的内容进行检测。如果检测后输入的信息正确，则会出现“添加成功”的提示框，从而可以进行下一步操作；如果系统检测后检测到想要添加的信息不符合规范要求，则会提示报错，需要进行修改后重新添加。添加信息流程图如图3-4所示：

图3-4添加信息流程图
3.4.3删除信息流程
最后为删除信息页面。进入该页面后，用户可以对所要删除的信息进行选择，选择好删除的内容后，会有一个“是否确认删除”的提示框，操作者可以根据自己的意愿来选择“是”或“否”。完成上述操作，系统会自动的对删除的内容进行判断，如果符合删除要求则会成功删除数据记录，并且更新数据库的内容信息；如果删除的数据记录不符合要求，则会有一个“删除失败”的提示框，操作人员需要根据提示来进行修改，修改完成后重新删除知道删除成功。删除信息流程图如图3-5所示：

图3-5删除信息流程图

2 系统设计

4.1 系统体系结构
个性化书籍推荐系统的结构图4-1所示：

图4-1系统结构
登录系统结构图，如图4-2所示：

图4-2登录结构图
4.2 系统总功能结构设计
系统按照用户的实际需求开发而来，贴近生活。从管理员通过正确的账号的密码进入系统，可以使用相关的系统应用。管理员总体负责整体系统的运行维护，统筹协调。
系统整体模块设计：系统分为管理员和用户两大角色，系统管理员有最大的权限，总体功能展示如图4-3所示。

图4-3 系统总体功能图
4.3 数据库设计
数据库设计（Database Design）是针对特定的数据库管理体系，针对特定的数据库进行结构和构建的流程。
在信息系统的开发与推荐中，数据库的设计是实现数据库与应用的关键技术。因为数据库应用系统的复杂性，使得数据库的开发工作非常复杂，所以优化的设计不是一朝一夕就可以完成的，而是一个“循序渐进”的过程，即将数据库中的数据目标和它们的相互关系进行计划和组织。
通过对个性化书籍推荐系统的主要功能信息进行规划并分为若干功能实体信息，实体信息将使用E-R图加以表示，本系统的主要功能实体图如下图所示：

图4-4用户实体属性图

4.4 数据表
把按照数据库理念建立的E-R图，转换为国际关系信息库。在关联数据库中，统计关联主要由统计表所构成，但是表的构成主要体现在表格的数文字段上。如下表所示。
表4-1：配置文件
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
name varchar 100 配置参数名称
value varchar 100 配置参数值

表4-2：用户
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
yonghuzhanghao varchar 200 用户账号
xingming varchar 200 姓名
mima varchar 200 密码
xingbie varchar 200 性别
shouji varchar 200 手机
touxiang longtext 4294967295 头像

表4-3：关于我们
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
title varchar 200 标题
subtitle varchar 200 副标题
content longtext 4294967295 内容
picture1 longtext 4294967295 图片1
picture2 longtext 4294967295 图片2
picture3 longtext 4294967295 图片3

表4-4：小说信息
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
laiyuan varchar 200 来源
fengmian longtext 4294967295 封面
xiaoshuoming varchar 200 小说名
zuozhe varchar 200 作者
chubanshe varchar 200 出版社
chupinfang varchar 200 出品方
pingfen float 评分
chubannian varchar 200 出版年
yeshu int 页数
dingjia varchar 200 定价
detail longtext 4294967295 介绍

表4-5：用户表
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
username varchar 100 用户名
password varchar 100 密码
role varchar 100 角色 管理员
addtime timestamp 新增时间 CURRENT_TIMESTAMP

表4-6：收藏表
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
userid bigint 用户id
refid bigint 商品id
tablename varchar 200 表名
name varchar 200 名称
picture longtext 4294967295 图片
type varchar 200 类型(1:收藏,21:赞,22:踩,31:竞拍参与,41:关注) 1
inteltype varchar 200 推荐类型
remark varchar 200 备注

表4-7：书籍分类
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
shujileixing varchar 200 书籍类型

表4-8：热门书籍
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
shujibianhao varchar 200 书籍编号
shujimingcheng varchar 200 书籍名称
shujizuozhe varchar 200 书籍作者
shujifengmian longtext 4294967295 书籍封面
shujifenlei varchar 200 书籍分类
chubanshe varchar 200 出版社
chubannianfen varchar 200 出版年份
shujibanci int 书籍版次
shujijiage int 书籍价格
shujijianjie longtext 4294967295 书籍简介
clicktime datetime 最近点击时间
clicknum int 点击次数 0

表4-9：在线反馈
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
userid bigint 留言人id
username varchar 200 用户名
avatarurl longtext 4294967295 头像
content longtext 4294967295 留言内容
cpicture longtext 4294967295 留言图片
reply longtext 4294967295 回复内容
rpicture longtext 4294967295 回复图片

表4-10：公告栏
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
biaoti varchar 200 标题
gonggaoleixing varchar 200 公告类型
fengmiantupian longtext 4294967295 封面图片
gonggaoneirong longtext 4294967295 公告内容
faburiqi date 发布日期
faburen varchar 200 发布人

表4-11：热门书籍评论表
字段名称 类型 长度 字段说明 主键 默认值
id bigint 主键 主键
addtime timestamp 创建时间 CURRENT_TIMESTAMP
refid bigint 关联表id
userid bigint 用户id
avatarurl longtext 4294967295 头像
nickname varchar 200 用户名
content longtext 4294967295 评论内容
reply longtext 4294967295 回复内容

3 系统详细设计

5.1系统功能实现
当人们打开系统的网址后，首先看到的就是首页界面。在这里，人们能够看到系统的导航条，通过导航条导航进入各功能展示页面进行操作。系统首页界面如图5-1所示：

图5-1 系统首页界面

热门书籍：在热门书籍页面的输入栏中输入书籍名称、书籍作者和选择书籍分类进行查询，可以查看到热门书籍详细信息，并根据需要进行评论或收藏操作；热门书籍页面如图5-2所示：

图5-2热门书籍详细页面

公告栏：在公告栏页面的输入栏中输入标题和公告类型进行查询，可以查看到公告栏详细信息；公告栏页面如图5-3所示：

图5-3公告栏详细页面

小说信息：在小说信息页面的输入栏中输入小说名和作者进行查询，可以查看到小说详细信息，小说信息页面如图5-4所示：

图5-4小说信息详细页面