参赛单元:互联网、大数据及云计算
作者:刘金榜
单位:武汉市规划研究院
1 引言
随着经济社会的发展和人们对时效性要求的不断提高,航空运输逐渐成为现代城市之间人流和货流运输高效便捷的手段之一。人流量和货运量一方面是一个城市经济发展繁荣层次高低的重要标志,另一方面也体现了城市与城市之间人流与物流的紧密程度。本文基于FME(Feature Manipulate Engine),通过抓取武汉天河国际机场互联网门户公开的航班出发数据和航班到达数据,对武汉市航空运输的现状进行解析,并分析武汉市和全国主要城市之间的航空运输紧密度,为武汉市航空运输远景规划提供科学决策的数据。
2 FME简介
FME是加拿大Safe Software公司开发的空间数据转换处理系统,它是完整的空间数据ETL(Extract-Transform-Load)解决方案。该方案基于OpenGIS组织提出的新的数据转换理念“语义转换”,通过提供在转换过程中重构数据的功能,实现了超过325种不同空间数据格式(模型)之间的转换,为进行快速、高质量、多需求的数据转换应用提供了高效、可靠的手段。
3 总体思路流程
整体的思路流程分为四个部分,首先是航班出发数据和航班到达数据的抓取和列表数据的解析;其次是对第一步获取的二元表格数据进行清洗、统计及处理,剔除掉非大陆地区城市,对航班出发数据添加出发城市信息,对航班到达数据添加目的地城市信息;然后是对第二步处理后的统计数据根据不同的分析需要进行空间化,形成分析需要的空间化航班统计信息数据;最后是对空间化的到达和出发数据生成航班出发和航班到达OD联系数据,对与城市空间点位关联后的到达出发数据进行武汉市与其他城市之间的航班联系紧密度分析。整体的思路流程如下图1所示:
4 方案实现
本文数据处理部分所有实现基于的是FME 2018版本。方案的整体实现如下图2所示:
4.1 数据源分析
通过对武汉天河机场官网航班出发和航班到达数据进行分析和挖掘,武汉天河机场官网只支持当前日期前五天和当前日期共六天的出行数据浏览,航班出发信息数据包括航班的出发时间、目的地、航班号、航站楼、值机柜台、登机口和航班状态等信息,航班出行的样例数据如下图3所示: