大家好，小编为大家解答python气象数据处理与绘图的问题。很多人还不知道基于python的气象数据分析，现在让我们一起来看看吧！
基于大数据重庆市气象数据分析
摘 要
信息化社会内需要与之针对性的信息获取途径，但是途径的扩展基本上为人们所努力的方向，由于站在的角度存在偏差，人们经常能够获得不同类型信息，这也是技术最为难以攻克的课题。针对气象数据等问题，对气象信息进行研究分析，然后开发设计出气象数据分析系统以解决问题Python如何画九朵花。
重庆市气象数据分析系统主要功能模块包括系统首页、轮播图、公告消息、资源管理（天气资讯、资讯分类）系统用户（管理员、普通用户）模块管理（天气预报、天气数据），采取面对对象的开发模式进行软件的开发和硬体的架设，能很好的满足实际使用的需求，完善了对应的软体架设以及程序编码的工作，采取Mysql作为后台数据的主要存储单元，采用Python技术、Ajax技术进行业务系统的编码及其开发，实现了本系统的全部功能。本次报告，首先分析了研究的背景、作用、意义，为研究工作的合理性打下了基础。针对气象数据分析系统的各项需求以及技术问题进行分析，证明了系统的必要性和技术可行性，然后对设计系统需要使用的技术软件以及设计思想做了基本的介绍，最后来实现气象数据分析系统和部署运行使用它。
关键词：气象数据；Python技术；Mysql数据库
Analysis of Chongqing meteorological data based on big data
Abstract
In the information society, there is a need for targeted access to information, but the expansion of the access is basically the direction of people's efforts. Because of the deviation in the perspective, people can often obtain different types of information, which is also the most difficult subject for technology to overcome. Aiming at meteorological data and other problems, the meteorological information is studied and analyzed, and then the meteorological data analysis system is developed and designed to solve the problem.
The main functional modules of Chongqing Meteorological Data Analysis System include the system home page, rotation chart, announcement message, resource management (weather information, information classification) system user (administrator, ordinary user) module management (weather forecast, weather data). The object-oriented development mode is adopted for software development and hardware installation, which can well meet the actual use needs, It has improved the corresponding software installation and program coding work, adopted MySQL as the main storage unit of background data, and adopted Python technology and Ajax technology to code and develop the business system, realizing all functions of the system. This report first analyzes the background, role and significance of the research, laying a foundation for the rationality of the research work. This paper analyzes the various requirements and technical problems of the meteorological data analysis system, proves the necessity and technical feasibility of the system, and then makes a basic introduction to the technical software and design ideas needed to design the system, and finally realizes the meteorological data analysis system and deploys and runs it.
Key words: meteorological data; Python technology; MySQL database
目 录
当今社会，竞争激烈，企业乃至国家之间，竞争的是资源。比资源更为重要的是―一信息"。信息在现代经济生活中的作用越来越大，已经成为市场竞争的重要手段。对于企业来说，信息的重要性更是不言而喻。缺乏信息，即使有了资金、厂房、物资和能源，办企业也十分困难，因为企业没有生命力。因而，信息是最重要的资源，谁占有的信息多、掌握的信息准确，谁就有了权威，有了制胜的先机。
然而，随着现代社会人们获得信息的渠道越来越广泛，除了报纸、广播、电视等传统渠道，互联网、手机以及目之所及的户外大屏幕等新型渠道的加入，使得人们获取各类信息的途径不断增加，尤其是人们对信息重要程度的认识越来越普及和深入，信息垄断被打破，大量的信息被人们所共享。
古有飞鸽传书，可传战事之急;今有气象数据，可测明日风云。
气象事业是科技型、基础性社会公益事业。天气、气候和气候变化，与政治、经济、国防和人民生活密切相关，事关国民经济和社会发展的方方面面，事关人民群众的生产生活和切身利益，事关党和政府重大决策的实施。
在全球气候变暖背景下，世界范围的极端天气气候事件有增多趋势，异常天气现象越来越频繁，气象灾害的破坏性越来越大，引起了国际社会的高度关注l5'。气象科技竟争日趋激烈，在应对气候变化和支撑国际谈判中的基础性地位日益提升。
按照著名的“德尔菲气象定律”:企业气象投入与产出比为198，即在气象信息上每投资1元，便可以得到98元的经济回报6。
在德国，气温超过22摄氏度，啤酒开始畅销;气温再每上升1摄氏度，大瓶装的啤酒每天会多销230万瓶。德国气象公司由此开发了“啤酒指数”"7'。此外，类似的还有乘车指数、冰激凌指数、泳装指数、食品霉变指数等，商家可据此提前制订生产营销计划。精明的商家根据气象数据的情况，就能提前确定库存和商品品种。
虽然目前我国气象服务的生产活力还未全面显现，气象服务市场的开发还存在一定的问题，但可以肯定的是，随着经济的发展与国民生活质量的提高和气象科技的进一步发展、气象服务领域的进一步拓宽、适应市场经济发展的气象服务体系的健全，气象服务必将进入人们生活的方方面面，气象服务的市场将得到更广阔的发展空间!8。
不久的将来，高德地图将告诉你15分钟后一公里内的天气状况，以及某条街道24小时前刮过很大的西北风%。当你在暴雨中行驶时，高德地图会提醒你:“前方道路已严重积水，您的车辆驶入可能会被水淹，建议您绕道。”
总而言之，气象事业正处于朝阳阶段，以此为依托的各种气象数据软件层出不穷，呈现一片欣欣向荣景象。
首先，通过引擎搜索或者查阅相关文献资料，了解了本系统开发的背景以及设计系统的意义所在，收集用户需求信息。其次，在开发工具上，最终确定选用Python平台来设计开发本系统，Mysql作为设计数据库的工具。即利用Python语言实现用户界面，并同数据库连接起来实现完整的通信功能。之后，设计出系统大致的功能模块。主要从方便系统用户和系统管理员的角度进行分析，明确该系统应该具有的功能。最终是测试系统，通过用例测试发现存在的问题并找到解决的方案。利用现有的开发平台，结合自己所学的知识，在老师的指导帮助下来完成该设计，确保系统的可用性、实用性。
本系统前端部分基于MVVM模式进行开发，采用B/S模式，后端部分基于python的Django框架进行开发。
前端部分：前端框架采用了比较流行的渐进式JavaScript框架Vue.js。使用Vue-Router和Vuex实现动态路由和全局状态管理,Ajax实现前后端通信，Element UI组件库使页面快速成型，项目前端通过栅格布局实现响应式，可适应PC端、平板端、手机端等不同屏幕大小尺寸的完美布局展示。
后端部分：采用Django作为开发框架，同时集成Redis等相关技术。
Python 是一个高层次的脚本语言结合了解释性、编译性、互动性和面向对象的。Python 的设计，相比其他语言经常使用英文关键字和其他语言的一些标点符号，它具有比其他语言更有特色语法结构，具有很强的可读性。
解释型语言：类似于Python和Perl语言，这意味着开发过程中没有了编译这个环节。
交互式语言：可以在一个 Python 提示符 >>> 后直接执行代码。
面向对象语言：Python支持面向对象的风格或代码封装在对象的编程技术。
ECharts，一个使用 JavaScript 实现的开源可视化库，可以流畅的运行在 PC 和移动设备上，兼容当前绝大部分浏览器（IE8/9/10/11，Chrome，Firefox，Safari等），底层依赖矢量图形库 ZRender，提供直观，交互丰富，可高度个性化定制的数据可视化图表。
Mysql 经过多次的更新，功能层面已经非常的丰富和完善了，从Mysql4版本到5版本进行了比较大的更新，在商业的实际使用中取得了很好的实际应用效果。最新版本的Mysql支持对信息的压缩，同时还能进行加密能更好的满足对信息安全性的需求。同时经过系统的多次更新，数据库自身的镜像功能也得到了很大的增强，运行的流畅度和易用性方面有了不小的进步，驱动的使用和创建也更加的高效快捷。最大的变动还是进行了空间信息的显示优化，能更加方便的在应用地图上进行坐标的标注和运算。强大的备份功能也保证了用户使用的过程会更加安心，同时支持的Office特性还支持用户的自行安装和使用。在信息的显示形式上也进行了不小的更新，增加了两个非常使用的显示区，一个是信息区，对表格和文字进行了分类处理，界面的显示更加清爽和具体。第二是仪表的信息控件，能在仪表信息区进行信息的显示，同时还能进行多个信息的比对，为用户的实际使用带来了很大的便捷[8][9]。
针对本文中设计的气象数据分析系统在实际的实现过程中，最终选择Mysql数据库的主要原因在于在企业的应用系统应用及开发的过程中会存在大量的数据库比较频繁的操作，而且数据的安全性要求也是非常的高。综合这些因素，最终选择安全性系数比较高的Mysql来对气象数据分析系统后台数据进行存储操作。
数据库管理系统的总体结构图如下图所示。
图2-1 数据库组成结构
B/S架构采取浏览器请求，服务器响应的工作模式。
用户可以通过浏览器去访问Internet上由Web服务器产生的文本、数据、图片、动画、视频点播和声音等信息；
而每一个Web服务器又可以通过各种方式与数据库服务器连接，大量的数据实际存放在数据库服务器中；
从Web服务器上下载程序到本地来执行，在下载过程中若遇到与数据库有关的指令，由Web服务器交给数据库服务器来解释执行，并返回给Web服务器，Web服务器又返回给用户。在这种结构中，将许许多多的网连接到一块，形成一个巨大的网，即全球网。而各个企业可以在此结构的基础上建立自己的Internet。
在 B/S 模式中，用户是通过浏览器针对许多分布于网络上的服务器进行请求访问的，浏览器的请求通过服务器进行处理，并将处理结果以及相应的信息返回给浏览器，其他的数据加工、请求全部都是由Web Server完成的。通过该框架结构以及植入于操作系统内部的浏览器，该结构已经成为了当今软件应用的主流结构模式。
技术性方面，采用当前主流的Python技术进行系统主体框架的搭建，前台使用jquery，ajax，实现前台页面的设计与美观调整，以上技术，均由本人经过系统学习，并且都是在课程设计中实践过的，可以使得开发更加便捷和系统。从技术角度看，这个系统是完全可以实现的。
实用性方面，本次设计的主要任务是在气象数据分析系统内气象数据、天气预报、地区管理、年降水量、空气指数等，符合当前潮流的发展。从用户角度出发，同时也考虑系统运营成本和人力资源，采用网络上的便捷方式，实现线上业务，使得业务流程更系统，也更方便用户的体验，比较实用。
经济性方面，由于本课题中设计的气象数据分析系统的主要目的是为了能够更加方便及快捷的进行信息的查询管理及检索服务，也就是能够可以直接投入使用的信息化软件。系统的主要成本主要是集中在对使用数据后期继续维护及其管理更新这个操作上。但是一旦系统投入到实际的运行及使用之后就能够很好的提高信息查询检索的效率，同时也需要有效的保证查询者的信息方面的安全性，同时这个气象数据分析系统所带来的实际应用方面的价值是远远的超过了实际系统进行开发与维护方面的成本，因此，从经济上来说开发这个软件是可行的。
气象数据分析系统的功能主要分为前台用户根据自己的需求进行注册登录，浏览气象数据并对选中的天气进行搜索操作。后台系统管理员因职责的不同，管理员主要对气象数据、天气预报、地区管理、年降水量、空气指数进行处理。
系统用例图如下所示。
图3-1 系统用例图
前台用户可分为未注册用户需求和以注册用户需求。
未注册用户的功能如下：
注册账号：用户填写个人信息，并验证手机号码。
浏览资讯：用户可以根据气象数据浏览天气的信息，并选中某个城市查看详情
浏览气象数据：选中某个城市可查看其气象数据。
已注册用户的功能如下：
登录：根据账号密码进行登录操作。
维护个人信息：用户因个人信息的变更可以随时修改自己注册信息。
浏览气象数据：选中某个城市可查看其气象数据。
后台管理员可分为普通管理员和超级管理员。
管理员功能如下：
修改密码：管理员可以随时修改自己进入系统的登录密码，以保证系统的安全性。
管理普通管理员：对普通管理员进行管理。调动相关工作人员时可以添加或删除普通管理员。
天气数据管理：对天气数据信息进行维护，添加、删除、修改信息。
气象数据管理：对气象数据信息进行维护，添加、删除、修改信息。
用户管理：可以查看注册用户的信息，并对其进行管理。
首先主要考虑的是系统功能软件，在具体设计的环节上，是不是能够较好的满足各类用户的基本功能需求，如果不能较好的满足用户需求，那么这个系统的存在是没有价值的。软件系统的非功能性求分析，从7个方面展开，一个是性能分析，针对系统；一个是安全分析，针对系统，一个是完整度分析，针对系统，一个是可维护分析，针对系统，一个是可扩展性分析，针对系统，一个是适应业务的性能分析。面对气象数据分析系统存在的性能、安全、扩展、完整度等7个方面性能综合比对分析后发现，需要相应的非功能性需求分析。
安全性对每一个系统来说都是非常重要的。安全性很好的系统可以保护企业的信息和用户的信息不被窃取。提高系统的安全性不仅是对用户的负责，更是对企业的负责。尤其针对于气象数据分析系统来说，必须要有很好的安全性来保障整个系统。
系统具有对使用者有权限控制，针对角色的不通限制使用者的权限，以此来确保系统的安全性。
数据库中的数据是从外界输入的，当数据的输入时，由于种种原因，输入的数据会无效，或者是脏数据。因此，怎样保证输入的数据符合规定，成为了数据库系统，尤其是多用户的关系数据库系统首要关注的问题。
因此，在写入数据库时，要保证数据完整性、正确性和一致性。
对系统的数据流进行分析，系统的使用者分为二类，一般用户，管理员。系统主要对界面信息传送，登录信息的验证，注册信息的接收，用户各种操作的响应做处理。
系统顶层数据流图如下图所示。
图3-2 顶层数据流图
要判断用户是是什么身份，是根据登录的数据来判断后，跳转到对应的功能界面。在系统的内部用户就可以对数据进行操作，数据库中心就可以接收到系统传输的有效数据流来对数据sql语句进行对应操作。
系统底层数据流图如下图所示。
图3-3 底层数据流图
系统可以分为前台和后台两部分，每一种操作后系统都返回操作结果。前台和后台的数据连接主要通过数据库，既分别对数据库做不同的操作。
本气象数据分析系统的架构设计主要分为可以3层，主要有Web层，业务层，Model层。其中web层还包括View层和Controller层，Model层包括元数据扩展层和数据访问层。
系统架构如下图所示。
图4-1 系统架构
气象数据分析系统总体分为前台用户模块和后台管理员模块。
两个模块表现上是分别独立存在，但是访问的数据库是一样的。每一个模块的功能都是根据先前完成的需求分析，并查阅相关资料后整理制作的。
综上所述，系统功能结构图如下图所示。
图4-2 系统功能结构图
登录模块：登录模块是进入系统的入口，所有用户必须登录后才能访问系统。登录需要输入用户名和密码，如果多次尝试登录需要输入验证码。登录时需要选择用户的角色，是一般用户还是管理员登录等。登录成功后，会通过数据库获取用户的权限，并跳转至用户的主页面。
管理员用户管理模块：管理员管理包括：管理员的添加，修改和删除操作。添加管理员时，先判断用户添加的管理员是否是admin（超级管理员），如果不是则添加成功。修改时候，如果是超级管理员，可以修改所有管理员的信息，如果是普通管理员，那么只能修改自己的信息。超级管理员可以删除自己以外的所有其他管理员，普通管理员不能执行删除管理员的操作。
气象数据模块：气象数据促进用户对气象数据进行查看某个日期天气。
天气数据模块：可分为天气数据浏览、天气数据检索、天气数据维护三个模块，管理员对天气数据有维护的权限，发布新的天气数据、更新已有的天气数据等。
从前面可以分析到数据库中最重要的是气象数据，用户信息，管理员信息。分析可以得到如下数据描述：
平台用户：用于记录用户的各种信息，包括用户名、密码、基本情况信息，信誉、发布信息数等数据项。
管理员：记录管理员的登录信息。包括用户名，密码，权限等数据项。
天气数据：存储平台内的天气数据内容。包括标题，天气数据内容，时间等数据项。
根据前面的数据流程图，结合系统的功能模块设计，设计出符合系统的各信息实体。
系统ER图如下图所示。
图4-3 系统ER图
气象数据分析系统所拥有的数据表有以下：用户信息表，气象数据表，评论表。
由于数据表较多，只展示系统主要数据表，如下表所示。
表access_token (登陆访问时长)
| 编号 |
名称 |
数据类型 |
长度 |
小数位 |
允许空值 |
主键 |
默认值 |
说明 |
| 1 |
token_id |
int |
10 |
0 |
N |
Y |
临时访问牌ID |
|
| 2 |
token |
varchar |
64 |
0 |
Y |
N |
临时访问牌 |
|
| 3 |
info |
text |
65535 |
0 |
Y |
N |
||
| 4 |
maxage |
int |
10 |
0 |
N |
N |
2 |
最大寿命：默认2小时 |
| 5 |
create_time |
timestamp |
19 |
0 |
N |
N |
CURRENT_TIMESTAMP |
创建时间： |
| 6 |
update_time |
timestamp |
19 |
0 |
N |
N |
CURRENT_TIMESTAMP |
更新时间： |
| 7 |
user_id |
int |
10 |
0 |
N |
N |
0 |
用户编号: |
| 编号 |
名称 |
数据类型 |
长度 |
小数位 |
允许空值 |
主键 |
默认值 |
说明 |
| 1 |
air_index_id |
int |
10 |
0 |
N |
Y |
空气指数ID |
|
| 2 |
date |
date |
10 |
0 |
Y |
N |
日期 |
|
| 3 |
air_quality |
varchar |
64 |
0 |
Y |
N |
空气质量 |
|
| 4 |
region |
varchar |
64 |
0 |
Y |
N |
地区 |
|
| 5 |
pollutant |
text |
65535 |
0 |
Y |
N |
污染物质 |
|
| 6 |
exit_guide |
longtext |
2147483647 |
0 |
Y |
N |
出门指南 |
|
| 7 |
recommend |
int |
10 |
0 |
N |
N |
0 |
智能推荐 |
| 8 |
create_time |
datetime |
19 |
0 |
N |
N |
CURRENT_TIMESTAMP |
创建时间 |
| 9 |
update_time |
timestamp |
19 |
0 |
N |
N |
CURRENT_TIMESTAMP |
更新时间 |
| 编号 |
名称 |
数据类型 |
长度 |
小数位 |
允许空值 |
主键 |
默认值 |
说明 |
| 1 |
annual_precipitation_id |
int |
10 |
0 |
N |
Y |
年降水量ID |
|
| 2 |
particular_year |
varchar |
64 |
0 |
Y |
N |
年份 |
|
| 3 |
date |
date |
10 |
0 |
Y |
N |
日期 |
|
| 4 |
region |
varchar |
64 |
0 |
Y |
N |
地区 |
|
| 5 |
weather_type |
varchar |
64 |
0 |
Y |
N |
天气类型 |
|
| 6 |
rainfall |
int |
10 |
最低0.47元/天 解锁文章
扫一扫
2343
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
