设为首页|收藏本站|
发帖
登录 注册
西兔生活网 › 华人生活 › 移民签证 › 请问机场出租车相关的数据在哪找得到？ ...
回复 发帖
返回列表 发新帖
开启左侧

[问答] 请问机场出租车相关的数据在哪找得到？

[复制链接]
88697 2
残雪之峰 发表于 2022-8-20 04:58:02 | 只看该作者 打印 上一主题 下一主题
 
机场客流量，出租车数据在哪个地方可以查到


上一篇：2022年最新加拿大移民指南，选对移民途径，2年全家拿枫叶卡
下一篇：移民，是“加法”还是“减法”？
标签：客流量相关的出租车可以流量
@
免
责
声
明
1.西兔生活网 CTLIVES 内容全部来自网络;
2.版权归原网站或原作者所有;
3.内容与本站立场无关;
4.若涉及侵权或有疑义，请点击“举报”按钮，其他联系方式或无法及时处理。
举报

关联主题
回复

使用道具 举报

 

精彩评论2

正序浏览
跳转到指定楼层
沙发
OVERMARS_AFC 发表于 2022-8-20 04:58:46 | 只看该作者
 
在前面两篇文章中，我们分别介绍了出租车GPS数据有哪些应用，出租车GPS数据如何获取，本篇我们带来出租车GPS数据的第三个内容——出租车GPS数据清洗和分析的技术要点！首先我们先来看看出租车GPS数据的清洗！

出租车GPS数据的清洗

在时空大数据中，可以说基本上不存在完美的数据。数据集的各类错误异常情况普遍存在，而且很可能在意想不到的地方出现。因此，针对异常数据的清洗是在数据的正式处理分析之前必须做的重要步骤。缺少这一步骤，在后续的处理中很可能产生错误的分析结果。在出租车GPS数据中也不可避免地存在一定的数据异常。这里我们以数据中存在的异常载客状态为例，介绍数据异常的情况以及数据清洗的思路。


01 出租车数据载客字段异常情况

先来回顾一下出租车GPS数据的核心字段：

  • 车辆ID（VehicleNum）
  • 经度（Lat）
  • 纬度（Lng）
  • 时间（Stime）
  • 载客状态（OpenStatus）

数据中的载客状态（OpenStatus）字段表征了出租车载客状态。当值为1时，出租车有乘客，为载客状态；反之则为空载状态。如果我们将所有的车辆数据读取在一个表中，将数据按车牌号和时间排序。那么在理想状态下，一辆出租车正常的OpenStatus序列应该如图1所示，连续0序列和连续1序列依次出现。

第1张图片

图1 正常情况下一辆出租车的载客状态

当OpenStatus的值由A时刻的0变为B时刻的1时，代表乘客在A时刻与B时刻中间的某一时刻上车，运营开始。同样，当OpenStatus的值由C时刻的1变为D时刻的0时，代表乘客在C时刻与D时刻中间的某一时刻下车，运营结束。由于出租车的采样频率约为15s一次，我们可以近似地认为相邻采样点在时间和空间上十分相近，A、B两个时刻都可以看成是乘客的上车点；同样地，C时刻和D时刻都可以看成是下车点。为了数据处理的方便，我们统一把A时刻看成是乘客的上车点，C时刻看成是乘客的下车点。

但是，OpenStatus字段中可能会出现异常情况（如图2所示）：

第2张图片

图2 载客状态的异常情况

情况一，在连续0的序列中，突然出现一个1。如果用我们刚才判断乘客上下车处理逻辑，异常数据会导致乘客上下车点连续的两条记录，如果我们没有剔除，后续的出行OD分析中则会表现为在同一地点上下车。

情况二，在连续1的序列中，突然出现一个0。我们不排除某些出租车司机生意火爆，上一个订单结束后来不及休息就可以马不停蹄地开始下一单。但考虑到GPS数据15s的采样间隔，要在15-30s的时间内实现一个乘客付钱、下车、另一个乘客上车、关上车门、开始打表的一系列过程，对两个乘客来说可能是难度系数较高的操作，可以认为这是一种小概率事件。

这种两种情况的产生都极有可能是采集设备的突发异常造成的，在数据清洗中，应将这两种情况都予以剔除。

02 出租车载客字段异常清洗思路

如何剔除上面提到的两种数据异常呢？我们可以很容易地说出这两种异常都具有的共同特征：
异常数据的载客状态与前一条数据和后一条数据的值均不同。
这三条数据必须是同一辆出租车的连续数据。

也就是，程序只需要找到符合上述特征的数据，并将其剔除即可。如果将上面的条件总结成为程勋中判断条件则为：

  • 异常数据的OpenStatus与前一条数据不等；
  • 异常数据的OpenStatus与后一条数据不等；
  • 异常数据的VehicleNum与前一条数据的VehicleNum相等；
  • 异常数据的VehicleNum与后一条数据的VehicleNum相等；

将上面的这四个条件用和（&）连接起来，所判断的即为异常数据，而将异常数据剔除，就完成了清洗。

出租车GPS数据的分析

数据清洗好后，就可以来做分析了，我们总结了基于出租车GPS数据常做的三个分析内容，分别为：

  • 提取出租车订单的OD，来分析乘客的打车需求
  • 提取出租车的行动轨迹，来分析载客里程、车速、油耗、排放等
  • 将出租车的行动轨迹与地图匹配，来分析道路流量、道路车速等

我们依次来看一下！

01 提取出租车订单的OD

OD（Origin-destination）信息是时空大数据中的重要信息，其中O代表出行的出发点，D代表出行的目的地。OD提取的目的就是识别乘客出行的起讫点，能直观反应出乘客的上车、下车需求，常作为道路交通规划和城市布局等领域的研究手段。

要怎样从大量的GPS信息中提取出每个出租车订单的起点和终点呢？

由于我们拿到的是一大堆出租车GPS的散点时空数据，散点时间间隔大概在15s（取决于GPS的采样频率），因此要提取出乘客出行的OD信息，首先要定义乘客的上车时点、下车时点选取标准，然后基于标准将上、下车时点数据筛选出来，最后整理成最终的OD数据。

1.上、下车时点选取标准定义
如果把出租车GPS数据按照载客状态（OpenStatus）区分颜色后在空间中画出来，得到的就是如图4所示的出租车轨迹点数据：蓝色是空载，红色是载客，把数据点连接起来想象成一段段由两个点形成的轨迹段。

第3张图片

图4  出租车GPS数据表和对应轨迹图

我们定义上车时点其特征是这一时刻载客状态（OpenStatus）是0（蓝色），下一个时刻为1（红色），下车时点其特征是这一时刻载客状态（OpenStatus）是1（红色），下一个时刻为0（蓝色）。

2.上、下车时点数据提取
有了上下车时点的标准后，就要提取出符合标准特征的时点数据。由于其特征需要这一时刻和下一时刻的载客状态（OpenStatus）数据，所以可以考虑这样实现（以python实现为例说明思路）：
①清洗后的数据按车辆ID（VehicleNum）、时间（Stime）进行排序；
②用python的shift方法，把数据表整体往上移一行；
③将原表与上移后的表拼接起来，在一行中得到了同一车辆当前时刻和下一时刻的GPS信息，如图5所示样例；
④按以下条件提取出乘客上车、下车的时点数据：

  • 同一辆车限制条件 – VehicleNum和VehicleNum1相等；
  •     乘客上车时点限制条件 - OpenStatus（当前时刻载客状态）为0，OpenStatus（下一时刻载客状态）为1；
  •     乘客下车时点限制条件 - OpenStatus（当前时刻载客状态）为1，OpenStatus（下一时刻载客状态）为0。

第4张图片

图5  出租车GPS数据表Shift拼接后样例

3.整理OD数据
上一步中我们提取出了同一车辆前后时刻发生载客状态变化的数据，得到了每辆出租车的乘客上车时点、下车时点GPS数据，相当于车辆的订单数据，一个车有多个订单，很多的上车信息、下车信息，但同一个订单的上车、下车信息不在同一行上，因此我们还需要整理一下，把同一订单的上、下车时点信息处理到同一行上。

我们用上一步中类似的思路，借助python的shift方法，把提取出来的订单数据整体往上移一行，和移动前的订单数据拼在一起后，得到了如图6所示数据，按以下条件进行筛选就能得到在一行上的订单数据：

  •   同一辆车限制条件 – VehicleNum和VehicleNum1相等；
  •   载客起始状态限制条件 - OpenStatus（当前时刻载客状态）为0。

第5张图片

图6 出租车GPS上、下车时点数据表Shift拼接后样例

最后筛选保留车辆ID（VehicleNum）、上下车的时间（Stime、Stime1）和位置（Lng、Lat、Lng1、Lat1）字段，整理得到最终的OD信息。

02 提取出租车的行动轨迹

在OD提取中，我们只分析了出租车订单的起点和终点信息，并没有刻画车的行程轨迹。要想刻画出租车的行程轨迹，就得把每一个有效的采样位置数据都用上，理论上采样频率越高，就越逼近车辆的真实行驶路径。

同OD提取类似，我们拿到的是一大堆的GPS点数据，假设蓝色圆圈是空载状态，红色是载客状态，就可以做出轨迹点的分布，然后将GPS点数据处理成轨迹段数据，也就是将两个时间临近的有效采样点连接起来行成有向轨迹段，如图7所示。基于轨迹段数据，可以进一步结合载客状态（OpenStatus）提取出载客的轨迹段，从而扩展计算每个载客轨迹段的载客里程、车速，有了里程和速度后，还能分析油耗、排放等情况。

第6张图片

图7 出租车GPS轨迹点、轨迹段示例图

那么，如何把GPS点数据处理成轨迹段数据呢？提取思路整体来看与OD提取类似。

我们的目标是把GPS点转成段，每一段以相邻时间的两个GPS点作为信息。我们一起来看一下初始数据结构和目标数据结构的样式：

  • 初始数据结构：轨迹点数据（图8）
  • 目标数据结构：轨迹段数据（图9）

要将点数据转换成段数据，就需要把当前时点的GPS数据和下一时点的数据放到同一行上来，这样每一行数据表示的是一个轨迹段。

第7张图片

图8 出租车GPS轨迹点数据结构示例图

第8张图片

图9 出租车GPS轨迹段数据结构示例图

处理思路和OD提取一样：

  • 清洗后的数据按车辆ID（VehicleNum）、时间（Stime）进行排序；
  • 用python的shift方法，把数据表整体往上移一行；
  • 将原表与上移后的表拼接起来，得到轨迹段数据；
  • 基于轨迹段数据可以扩展计算其他指标，如距离、车速、排放等；
  • 加字段区分轨迹段的载客状态，如第一次空载、第一次载客、第二次空载……

03 将出租车的行动轨迹与地图匹配

最后来介绍一下地图匹配，地图匹配指的是将GPS轨迹数据与实际的道路地图进行匹配，实现车辆空间属性与GIS信息的对应，可以得到车辆各时间点经过的道路信息，进而分析道路流量、道路车速计算等，为研究道路交通状态提供支撑。

第9张图片

图10 地图匹配示例图

地图匹配通常来说有两种思路：

  • 不考虑连续路径近邻匹配
  • 考虑连续路径的匹配

1. 不考虑完整路径近邻匹配
第一种思路比较简单，就是把GPS点匹配到最近的线上，也就是点与线之间的近邻匹配，比如出租车GPS点在某些道路线的两边，那我们要把这个点匹配到最近的道路线上去。这种思路可以用KDTree近邻匹配来实现，它是一个常用的点匹配线的快速算法，这里推荐一个python上非常好用的时空大数据处理的第三方包——transbigdata包（介绍文档：https://transbigdata.readthedocs.io/zh_CN/latest/），下面以用这个工具为例介绍一下数据处理的思路：

  • 清洗得到出租车GPS数据表（点数据，gdfA）；
  • 获取对应区域的道路数据表（线数据，gdfB）；

Python调用transbigdata包中的ckdnearest_line函数，transbigdata.ckdnearest_line(gdfA,gdfB)，将点数据和先数据作为参数输入后，就能直接得到匹配的结果表。

这种方法优点是计算效率高，因为KDTree是考虑了计算效率后的点线近邻匹配优化算法，它会以最快的效率去应对点线匹配问题。

缺点就是没法考虑完整的路径。真实世界的出租车辆走的是连续的道路，点线近邻匹配算法只基于单个点来考虑最近的道路，没有考虑车前后道路的关系，有可能在实际道路中前面的路没法转到后面的路上来。

2. 考虑完整路径的匹配
如果要考虑车辆完整出行路径，就得用第二种思路：路网匹配，比如python包中的LeuvenMapMatching算法，这个算法会考虑整条行车轨迹在路网上是否符合逻辑，前后路段必须是接得上的才能匹配出来。

优点是得到的结果是可推测的完整路径；缺点是这个包的算法参数很多，调参复杂，匹配成功率较低，特别是当数据点太过稀疏的时候很可能匹配不上，计算时间会非常长。

进阶学习

1.出租车GPS数据分析内容的视频版本
对于上面讲到的出租车GPS数据分析内容感兴趣，想要进一步学习的同学，可以移步立方数据学院B站账号（账号名称为：立方数据学院）学习该部分的视频版本！
2.《交通大数据分析实战》课程
如果大家想要学习出租车GPS数据、共享单车数据、地铁IC刷卡数据、公交GPS数据的分析方法，可以报名立方数据学院推出的《交通大数据分析实战》课程，课程详情请搜索公众号“立方数据学社课程服务”！
回复 支持 反对

使用道具 举报

 
板凳
王明锰朗 发表于 2022-8-20 04:59:31 | 只看该作者
 
不是，9102年了，还有拿着南京16年的数据骗钱...真的佛
yiyuezhuo/cangqiong-scratch他们所谓的数据不过是之前苍穹上的数据，知乎上甚至都能搜到。
还有一些拿到闲鱼上骗钱的，不知道说什么好。
不过这些数据真伪性存疑，具体可以在知乎搜相关回答。
回复 支持 反对

使用道具 举报

 
返回列表
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

残雪之峰白金会员

0关注

7粉丝

460帖子

热门图文
热门帖子
排行榜
  • 日
  • 周
  • 月
活跃网友
返回顶部快速回复上一主题下一主题返回列表APP下载手机访问
Copyright © 2016-2028 CTLIVES.COM All Rights Reserved.  西兔生活网  小黑屋| GMT+8, 2024-4-29 12:46