【OD矩阵】《城市公交IC卡·数据分析方法及应用》笔记——公交数据数据处理注意点

最新推荐文章于 2024-01-14 16:37:34 发布
最新推荐文章于 2024-01-14 16:37:34 发布
阅读量2.9k 收藏 5
点赞数
分类专栏： 交通数据分析 文章标签： 数据分析 矩阵 数据挖掘 OD矩阵 公交数据分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chentao326/article/details/122636646
版权

《城市公交IC卡·数据分析方法及应用》 陈学武、李海波、候贤耀著

《城市公交IC卡·数据分析方法及应用》——OD矩阵的推导·笔记

一般而言，对公交数据流OD分析，所使用的数据中至少包括以下内容：卡编号、消费日期、 消费时间、车辆编号、线路编号

数据提取

公交数据的运营和服务性质决定了公交运营数据又很强的分布时段特性和周期性（早高峰、晚高峰），

公交运营以一日、一周、一月作为基本运营时间单位。为了使公交数据体现这种周期性，在进行数据分析时，至少包括一周数据，考虑到周末及节假日，数据分析时还是需要筛选出合适的数据范围。

数据预处理

时间格式

原始数据中经常会出现时间格式问题。考虑到后期需要对数据筛选，所以首先去统一时间格式

卡类型格式

一张IC卡可能会产生多种卡类型

出现错乱的IC卡代码后需要判断该代码是否是有效代码

如果不是有效代码，就可以认为是误差，来自于随即错误

如果是有效代码，结合变化前后数据，一般认为变化之后卡类型不变，即可认为是数据更新，否则是系统随机错误

代刷识别

如果出现两次刷卡时间间隔较短（小于站点间最短行程时间），则可以判断是后一次是代刷数据

数据处理流程图如下：

在这里插入图片描述

浅谈IC卡数据分析
小鱼酱的博客
01-20 4万+
文章目录1.简单介绍2. IC卡详解3.M1卡详解4.常用读写设备介绍5.滚码技术1. 滚动码技术是如何出现的？2. 常见的滚动方式3. 滚动码的破解方法4.操作步骤5.IC卡日期格式6.常见校验码7.楼层号表示 1.简单介绍 Mifare S50 简称M1，高频最常见的卡，每张卡独一无无二UID 号，可存储修改数据（学生卡，饭卡，公交卡，门禁卡）----国内大部分卡都是此卡 Mif...
基于站点OD的公交乘客出行OD推算方法
01-19
基于站点OD的公交乘客出行OD推算方法，李子木，陈学武，为解决传统公交OD调查操作困难且耗时耗力较多的不足，本文在采用小票法调查得到站点OD的基础上，提出了用站点OD推算公交乘客出行OD�
公交IC卡刷卡数据分析
zy_sysu的博客
04-20 6280
文章目录背景一、任务要求二、使用步骤1.引入库2.导入数据3.任务一4.任务二5.任务三6.任务四7.任务五8.任务六总结 背景 交通大数据是由交通运行管理直接产生的数据（包括各类道路交通、公共交通、对外交通的刷卡、线圈、卡口、GPS、视频、图片等数据）、交通相关行业和领域导入的数据（气象、环境、人口、规划、移动通信手机信令等数据），以及来自公众互动提供的交通状况数据（通过微博、微信、论坛、广播电台等提供的文字、图片、音视频等数据）构成的。 现在给出了一个公交刷卡样例数据集，包含有交易类型、交易时间、.
【OD矩阵】《城市公交IC卡·数据分析方法及应用》利用公交运营时间和乘客刷卡时间特征识别上车点
chentao326的博客
01-24 3612
《城市公交IC卡·数据分析方法及应用》——上车点识别·笔记 一般情况下，IC卡是没有记录上车点的信息，需要结合其他数据对IC卡处理 通常情况下，使用时间特征对数据匹配 公交运营时间和乘客刷卡时间特征 公交车辆运营一趟的的总时间： T=tan−tal=∑i=1k−1(Tsk−Trk) T = t_{an}-t_{al} = \sum_{i=1}^{k-1}(T_{sk}-T_{rk}) T=tan​−tal​=i=1∑k−1​(Tsk​−Trk​) 总时间 = 运行时间+停靠时间 公交车辆到达第k个站点的时间
【OD矩阵】《城市公交IC卡·数据分析方法及应用》基于换乘点的上车点识别
chentao326的博客
01-26 1173
《城市公交IC卡·数据分析方法及应用》 陈学武、李海波、候贤耀著 《城市公交IC卡·数据分析方法及应用》——基于换乘点的上车点识别·笔记 换乘点 通常情况下，公交乘客总是选择步行距离或者时间最短的站点间进行换乘，同时，换成距离应该在可接收的范围内 如果两条公交线路之间，有且仅有　一对公交站点之间的步行距离在可接受的换乘距离之内　即正交换乘 推导参数 线路参数表包含以下字段： 记录编号、线路编号、行车方向、发车间隔、线路行程时间、站点行程时间临界值——线路内个站点之间的平均最小形势时间 正交.
【OD矩阵】《城市公交IC卡·数据分析方法及应用》换乘行为识别
chentao326的博客
01-27 2282
《城市公交IC卡·数据分析方法及应用》 陈学武、李海波、候贤耀著 《城市公交IC卡·数据分析方法及应用》换乘行为识别 公交换乘过程分析 分类： 换乘公交方式划分： 同一种公交方式内部换乘 和 不同公交方式的换乘 换乘空间距离划分： 同站换乘 和 异站换乘 公交换乘行为的识别可以从时间角度考虑 主要时间包括：出发、上车、下车、到达 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-hzehS6ZI-1643251258946)(C:\Users\hp\D.
【小旭学长-使用python进行城市数据分析】笔记篇（下）【完结】
羊老羊
11-13 4026
2021.11.13 【小旭学长-使用python进行城市数据分析】笔记篇（上）:https://blog.csdn.net/wistonty11/article/details/121089882 【小旭学长-使用python进行城市数据分析】笔记篇（中）：https://blog.csdn.net/wistonty11/article/details/121210664 文章目录五. IC刷卡数据的基本处理5.1基于IC刷卡数据的地铁OD提取六. 可视化七. 练习7.1 每一条地铁线路的客流量7.2.
江科大STM32最全笔记整理『下篇』
最新发布
zhuguanlin121的博客
01-14 9498
7、ADC数模转换器 8、DMA直接存储器存取 9、USART串口 9-2 串口发送+接受 9-3 串口收发HEX数据包 I2C SPI协议 10.1 SPI简介 W25Q64简介 10.3 SPI软件读写W25Q64 10.4 SPI硬件读写W25Q64 BKP、RTC 11.0 Unix时间戳 11.1 读写备份寄存器BKP 11.2 RTC实时时钟 十二、PWR 12.1 PWR简介 12.2 修改主频 12.3 数据收发+睡眠模式 12.4 停止模式 12.5 待机模式： 十三、看门狗WDG 13.
【OD矩阵】《城市公交IC卡·数据分析方法及应用》基于IC&AVL数据的上车站点识别
chentao326的博客
01-26 1944
《城市公交IC卡·数据分析方法及应用》 陈学武、李海波、候贤耀著 《城市公交IC卡·数据分析方法及应用》基于IC&AVL数据的上车站点识别·笔记 算法基本思路: 此处算法的核心思想是：通过IC卡数据和AVL数据的时间匹配，获取IC卡记录对应的上车站点 算法所需要的数据主要是公交IC卡数据和AVL定位数据 以到离站时间数据为例 公交刷卡数据包括：乘客IC卡卡号、卡类型、刷卡日期、刷卡时间、所乘线路编号、所乘车辆编号等字段 进出站时间数据应包括车辆识别、线路识别、线路方向、站点名称、进站时间、出站时.
利用公交刷卡数据分析北京职住关系和通勤出行
zuiyishihefang的博客
11-02 1861
01文章信息《利用公交刷卡数据分析北京职住关系和通勤出行》，本篇文章于2021年10月15日发表于《地理学报》。02摘要基于位置服务(Location Based Service，LBS...
公交ic卡刷卡记录的居民出行od推算方法
12-16
公交ic卡刷卡记录的居民出行od推算方法，想了解这个方法的可以参考了
OD-Estimation:根据上下车数据估算公交网络上的始发地-目的地对
03-30
OD估计 根据上下车数据估算公交网络上的始发地-目的地对
Byte学堂：公交GPS及IC卡数据原理及分析方法
Byte_School的博客
02-04 2994
公交数据是指公交在营运过程中产生的交易、车辆运行等数据，通过对公交大数据进行深入的分析和挖掘，可以有效地监控城市道路交通运作状况及公交系统运营状况，及时、合理发现问题，调度交通资源，提高公交运力，缓解交通拥堵。 公交数据通常包含公交GPS数据、到离站数据、公交刷卡数据。 公交GPS数据通过GPS定位仪生成的数据，公交车通常安装了GPS定位仪，定位数据能实时传入后台服务器。定位数据通常每10秒一个，记录了当时出租车的时间、位置、车速等信息，其格式如下： 从数据字段可以看出，公交车GPS数据有以下两个特征
【笔记】根据公交卡出行记录识别小偷
数据产品笔记
02-09 1496
案例来源：@Bowen Du案例地址：http://www.kdd.org/kdd2016/papers/files/adf0629-duA.pdf（以下为案例的简要概述，便于之后能快速检索到相关内容。部分文字与图片可能直接来自原文，如有侵权请告知，谢谢）1. 目标：根据公交卡出行记录识别小偷2. 数据：1）automated fare collection (AFC) systems的数据集（即...
从地铁刷卡数据到OD矩阵
帅帅de三叔
12-20 1万+
利用集合论算法解决地铁刷卡记录数据转刷卡人次OD矩阵
【OD矩阵】笔记 || OD 数据可视分析综述·涂乐1), 陈彬捷1), 周志光1,2)*
chentao326的博客
01-16 1万+
[1] 刘滨, 刘增杰, 刘宇, 等. 数据可视化研究综述[J]. Journal of Hebei University of Science & Technology, 2021, 42(6). Origin Destination Data 何为OD数据 OD数据是一类系数的轨迹描述数据，主要包括空间潜移的起点和终点 仅能部分表达对象的移动轨迹，如出租车上下客的位置、手机基站记录的移动位置变化 特点： (1) 以 OD 点对(起点、终点以及对应时间等属 性)的形式存储, 与空间地图结合紧密.
如何对爬取的公交数据进行分析和可视化？
2301_77925375的博客
05-08 707
本文将介绍如何使用Python中的pandas、matplotlib和folium等工具，对爬取的公交数据进行分析和可视化。下面以柱状图为例，展示公交站点客流量分析结果的可视化展示。对公交线路进行分析，可以了解公交线路的长度、道路密度、停靠站点数量和覆盖范围等信息，有利于优化公交运营方案。对公交站点进行分析，可以了解公交客流量、换乘情况和地理位置等信息，有利于提升公交运营效率和服务水平。对公交客流量进行分析，可以了解公交线路的繁忙程度和热门站点等信息，有利于优化公交线路和调整班次安排。
Spss用K均值聚类Kmeans、决策树、逻辑回归和T检验研究不同因素对通勤出行交通方式选择的影响调查数据分析
大数据部落
07-14 1741
某交通工程专业博士生想要研究不同因素对通勤交通方式选择的影响，对成都两个大型小区（高端和普通）居民分别进行了出行调查，各调查了300人。其中Distance：居住地离上班地的距离（公里）Pincome：个人年收入（万元）Hincome：家庭年收入（万元）Age：年龄Gender：性别（0：女；1：男）Car：家庭拥有汽车的数量Education：教育水平（1：初中及以下；2：高中；3：专科；4：本科；5：研究生）Job：工作类型（1：公司职员；2：工厂工人；3：公务员；4：个体；5：事业单位；6：其他）Pe
基于python的transbigdata实现出租车轨迹数据分析与可视化
热门推荐
weixin_54309935的博客
03-21 1万+
基于python的transbigdata实现出租车轨迹数据分析与可视化
python百分位点计算方法 数学计算方法
05-26
在Python中，可以使用numpy库来进行百分位点的计算。numpy库中有一个percentile函数可以实现这个功能。 下面是一个简单的例子，展示如何使用numpy库来计算数据集的第90个百分位点： ```python import numpy as np # 创建一个包含随机数据的数组 data = np.random.normal(size=1000) # 计算数据集的第90个百分位点 pct = np.percentile(data, 90) print("数据集的第90个百分位点为：", pct) ``` 在这个例子中，我们首先使用numpy库生成了一个包含1000个随机数据的数组。然后，我们使用percentile函数来计算这个数据集的第90个百分位点，并将结果打印出来。 需要注意的是，numpy库中的percentile函数默认使用线性插值法来计算百分位点。如果需要使用其他插值方法，可以通过在函数中指定interpolation参数来实现。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值