基于Hadoop的b站动漫数据分析与可视化

一、前言

随着我国经济快速发展和人们生活水平的提高，人们对生活质量越来越有追求。在如今快节奏的生活中，人们更倾向于通过在家解决问题，这就为b站动漫数据分析与可视化管理带来了增长潜力和广阔前景。同时，随着对b站动漫数据分析与可视化管理需求的不断增加，该系统也变得越来越多样化和网络化，结合电子信息技术的发展。因此，b站动漫数据分析与可视化应运而生。

该系统构建在Hadoop平台上，并使用Java语言和MySQL数据库，在流行的B/S架构下将b站动漫数据分析与可视化管理各个方面都集成到数据库中，以满足用户需求。在确保系统稳定性的前提下，能够实现多功能模块的设计和应用。该系统由管理员和用户两个模块组成，并且不同角色有严格区别的准入制度。每个功能模块的设计均考虑到后续系统升级和维护的便利性。该系统采用软件组件化、精细化体系结构以及逻辑和数据分离等方法。

二、功能设计

3.3.1管理员需求分析

管理员端的功能主要是开放给系统的管理人员使用，能够对用户的进行管理，包括对他们的账号管理、对用户管理、番剧信息管理、系统管理进行查看，修改和删除等，对系统整体运行情况进行了解。

管理员用例分析图，如图3-1所示。

       

图 3-1管理员用例分析图

3.3.2用户需求分析

用户的功能主要是对个人账号和密码进行更新管理，对番剧信息和公告信息进行查询等。

用户用例分析图，如图3-2所示。

       

图 3-2用户用例分析图

对本系统进行全面的系统功能的分析，可以得出基于Hadoopb站动漫数据分析与可视化系统的功能模块图，如图4-1所示。

系统B/S架构原理图：

三、数据设计

概念模型的设计是为了抽象真实世界的信息，并对信息世界进行建模。它是数据库设计的强大工具。数据库概念模型设计可以通过E-R图描述现实世界的概念模型。而且Mysql数据库是自我保护能力比较强的数据库，限于篇幅要求，仅列出关键部分实体属性图和E-R图，如下所述。

四、部分效果展示

5.1 系统功能模块

系统的网址一打开，用户会进入到主页界面。在主页上，用户可以看到一个基于hadoop的数据处理系统的导航栏，通过导航栏可以方便地进入各种功能信息展示页面进行操作。系统首页界面如图5-1所示：

图 5-1系统首页界面

当用户想要在网站或应用程序上享受各种服务和功能时，他们需要进行注册。也就是说，用户在这个平台上创建一个新的账户。为了完成注册流程，用户需要在注册页面填写一些关键的信息，比如用户名、密码和电子邮件地址等。这些信息对于验证用户的身份和保护账户安全至关重要，用户注册页面如图5-2所示：

图 5-2用户注册页面

所谓番剧信息页面是专门提供动漫相关信息的页面。在这个页面上，用户可以查询和了解自己感兴趣的动漫的各种详细信息。要进行查询，用户需要在搜索输入栏中输入他们想要查询的动漫名称或相关关键词。输入可以是动漫的原名或翻译后的名字，也可以是与动漫有关的主要角色、导演或制作公司等相关信息。一旦输入完毕，系统会为用户进行搜索并显示与输入的信息相关的所有动漫。通过点击项目列表，用户可以查看每个具体的动漫信息。无论用户想查询哪部动漫的详细资料，都能在番剧信息页面得到满足。番剧信息页面如图5-3所示：

图 5-3番剧信息详细页面

用户可以在个人中心页面上管理和查看其个人账户信息。在这个页面上，他们能够准确更新、修改或添加个人信息，以保持数据的准确性和最新性。

要访问个人中心，用户通常需要先登录其账户。一旦成功登录，系统会自动跳转到个人中心页面。如图5-4所示：

图 5-4 个人中心界面

5.2 管理员功能模块实现

管理员进入主页面，主要功能包括对个人中心、用户管理、番剧信息管理、系统管理等进行操作个人中心管理：管理员可以访问和编辑自己的个人信息，例如更改密码、更新联系方式等，以确保账户安全和数据准确性。

用户管理：管理员有责任监管普通用户的活动，确保社区的秩序和安全。他们可以进行以下操作：

查看用户列表：浏览所有注册用户的基本信息。

编辑用户信息：修改或更新用户的个人资料。

番剧信息管理：为确保提供准确且丰富的动漫内容，管理员需要对番剧信息进行管理

添加新番剧：录入新的动漫信息到系统中。

编辑现有番剧：更新或更正已有动漫的信息。

删除不当内容：移除违反规定或不适当的动漫信息。

系统管理：管理员负责维护整个系统的稳定性和安全性，包括：

系统设置：配置和更新网站的参数，比如功能开关、界面布局等。管理员主页面如图5-5所示：

图 5-5管理员主界面

管理员点击用户管理。进入用户页面

查询用户账号：

输入查询：管理员可以在提供的搜索框中输入用户账号名称、邮箱地址或其他相关信息来过滤用户列表。

用户列表：

列表展示：用户页面会显示一份当前系统中所有用户的列表，包括账号名、电子邮箱、注册日期、最后登录时间等基本信息。

排序功能：管理员可以按照不同的列对用户列表进行排序，比如按照注册时间升序或降序排列。

查看详情：

选择用户：在用户列表中，管理员可以通过点击某个用户的账号来查看该用户的详细信息。。如图5-6所示：

图 5-6用户管理界面

管理员可以通过点击番剧信息管理来访问一个多功能页面，用于管理番剧信息。在该页面上，管理员有以下操作选项：

查询番剧信息：管理员可以按照不同条件进行查询，如番剧名称、类型、播放状态等，以快速找到所需的番剧信息。

新增番剧信息：管理员可以手动添加新的番剧信息到系统中，包括填写番剧名称、类型、播放状态与平台等，并将其保存到系统数据库中以备后续管理和查询。

爬取数据：管理员可以选择执行爬虫程序，从指定网站或API抓取最新的番剧信息。这样可以及时更新系统中的番剧数据，确保数据的准确性和完整性。

删除番剧信息：管理员可以根据需要删除系统中的番剧信息，可以是单个删除或批量删除操作，以清理和更新系统中的数据。

查看番剧详情：管理员可以选择具体条目查看详细的番剧信息，包括简介、演员阵容和播放时间等详细内容，以便更全面地了解该番剧。

修改番剧信息：管理员可以对番剧信息进行修改，包括修改名称、类型、播放状态等内容，并将修改后的内容保存到系统数据库中。

删除番剧信息：管理员还可以在查看番剧详情页面执行删除操作，从系统中删除该番剧的相关信息。这有助于清理系统中不需要的数据，保持数据的整洁和准确。如图5-7所示：

图 5-7番剧信息管理界面

管理员可以在爬取数据后，通过点击网站主页右上角的看板按钮来获得一系列实时的可视化分析图表。这些图表提供了对网站内容和用户行为深入洞察的方式，帮助管理员轻松监控和管理整个平台。

在看板的一个部分，管理员可以找到系统简介的概览信息，其中可能包含网站名称、口号、主要功能和成立时间等基础信息。此概览有助于管理员快速了解和回顾网站的基本情况。

另外一个信息显示了该平台上总共收录的动漫数量。通常以数字形式呈现，并且可能支持按时间进行筛选，例如展示过去一周、一个月或一年内新增的动漫数量。

还有一个图表展示了用户对动漫的评分统计。可清晰地看到不同分数段中动漫的数量或占比。常见的评分范围可能是1到10分，管理员可以利用这些数据来分析用户喜好和动漫的受欢迎程度。如图5-8所示：

图 5-8看板界面

系统管理页面能让管理员进行网站的管理细节调整，比如修改关于我们页面来展示团队信息和网站目标。此外，还可以更新系统介绍以保持服务内容的最新性，调整轮播图从而提升用户体验及推广最新活动，并发布或修改公告信息以告知用户重要事项。如图5-9所示：

图 5-9系统管理界面

五、浏览视频

链接：https://pan.baidu.com/s/1lnG0J6-UlhwNV5bycYOYWA?pwd=n3j6 
提取码：n3j6