基于Hadoop短视频流量数据分析与可视化-计算机毕业设计源码+LW文档

摘  要
随着我国经济的高速发展与人们生活水平的日益提高，人们对生活质量的追求也多种多样。尤其在人们生活节奏不断加快的当下，人们更趋向于足不出户解决生活上的问题，短视频流量数据分析与可视化管理展现了其蓬勃生命力和广阔的前景。与此同时，为解决短视频流量数据分析与可视化管理需求，短视频流量数据分析与可视化管理发展愈发多元化与网络化，与电子信息技术相结合。短视频流量数据分析与可视化系统应运而生。
该系统基于Hadoop平台，利用Java语言、MySQL数据库，结合目前流行的 B/S架构，将短视频流量数据分析与可视化管理的各个方面都集中到数据库中，以便于用户的需要。在确保系统稳定的前提下，能够实现多功能模块的设计和应用。该系统由管理员功能模块和用户模块组成。不同角色的准入制度是有严格区别的。各功能模块的设计也便于以后的系统升级和维护。该系统采用了软件组件化、精化体系结构、分离逻辑和数据等方法。

关键字：Java技术；短视频流量数据分析与可视化；Hadoop；B/S结构

 
Abstract
With the rapid development of our economy and the increasing improvement of people's living standard, people's pursuit of quality of life is varied. Especially in the rapid pace of people's life, people tend to stay at home to solve problems in life, short video traffic data analysis and visual management has shown its vigorous vitality and broad prospects. At the same time, in order to solve the demand of short video traffic data analysis and visual management, the development of short video traffic data analysis and visual management is increasingly diversified and networked, and combined with electronic information technology. Short video traffic data analysis and visualization system came into being.
This system is based on Hadoop platform, using Java language, MySQL database, combined with the current popular B/S architecture, all aspects of short video traffic data analysis and visual management are centralized into the database, so as to facilitate the needs of users. On the premise of ensuring the stability of the system, the design and application of multifunctional modules can be realized. The system consists of administrator function module and user module. The admittance system of different roles is strictly different. The design of each function module is also convenient for future system upgrade and maintenance. The system adopts the methods of software componentization, refinement architecture, separation of logic and data.

Key words: Java technology; Short video traffic data analysis and visualization; Hadoop; B/S structure 
目　　录
目　　录    I
1绪  论    1
1.1开发背景    1
1.2开发目的与意义    1
1.2.1开发目的    1
1.2.2开发意义    2
1.3本文研究内容    2
2开发技术    3
2.1 Java介绍    3
2.2 Hadoop介绍    3
2.3 Scrapy介绍    4
2.4 MySql简介    4
2.5 SPRINGBOOT框架    4
2.6 B/S架构    5
2.7 Tomcat简介    5
3系统分析    7
3.1系统可行性分析    7
3.1.1技术可行性分析    7
3.1.2经济可行性分析    7
3.1.3法律可行性分析    7
3.2系统性能分析    7
3.3功能需求分析    8
3.3.1管理员需求分析    8
3.3.2用户需求分析    8
3.4系统流程分析    9
4系统设计    10
4.1功能模块设计    10
4.2数据库设计    10
4.2.1数据库设计原则    10
4.2.2系统E-R图    10
4.2.3数据库表设计    12
5系统实现    15
5.1  系统功能模块    15
5.2  管理员功能模块实现    17
6系统测试    21
6.1系统测试内容    21
6.1.1 登录测试    21
6.1.2 角色测试    21
6.1.3　性能测试    22
6.2测试用例执行结果    22
结  论    23
参考文献    24
 
管理员端的功能主要是开放给系统的管理人员使用，能够对用户的进行管理，包括对他们的账号管理、对用户管理、番剧信息管理、系统管理进行查看，修改和删除等，对系统整体运行情况进行了解。用户的功能主要是对个人账号和密码进行更新管理，对番剧信息和公告信息进行查询等。