交通大数据,在新老技术概念间架设桥梁
交通大数据所采集的信息与传统交通调查数据之间存在很大差异,尽管我们可以采用例如“居民活动空间”等新技术概念来适应其特点,但是在许多情况下,仍然希望能够在新旧概念之间架设桥梁。例如,移动通信数据与围绕居民出行OD的交通调查所采集的数据存在一定程度上的差异,但是两者存在能够在部分参数上反映出来的内在联系。
交通调查通过访问调查记录居民一天的全部出行,包括出行时间、目的地、交通方式等,可以说详细记录了居民口述的出行活动。但是其缺陷是无法实现大样本调查(目前城市综合交通调查一般抽样率为1-5%),不能连续观测(尽管交通调查中也有连续追踪调查的方法,但是只能对少数典型用户实施,其抽样数量一般为数千户这样的量级)。
移动通信数据本质上是在满足通信需求基础上产生的用户时空位置信息,如果将其转换到传统出行OD概念,则需要增加很强的假设。对于一般大规模信息采集所使用的信令数据来说,由于移动通信数据的时空精度(其时间上具有与活动起始时刻不能对应的误差;其空间上获得的是所属基站,具有数百米至数公里的误差)并非理想,勉强转换成为OD数据其可信度往往受到很大的质疑。
尽管如此,我们仍然可以发现两种数据所形成的某些参数具有很强的相关性,从而可以通过建立转换模型(尽管这种转换模型需要定期标定)实现两者的映射。
图1中显示了上海市顾村居民利用移动通信数据测定的活动点(连续停留30分钟以上的空间位置)空间分布,以及居民出行调查获得的出行D点空间分布的对比情况,由于数据所反映的活动日期(手机数据所选取的调查数据为2011年9月1日至2011年9月30日期间识别出来的顾村居住社区居民用户数据,问卷数据为2012年8月29日至2012年9月4日的顾村大型居住社区入户问卷调查数据。)存在差异,以及样本数量的差异,其空间分布亦存在少许不同,但是总体态势是一致的。
*图中色块深浅表示在该区域内活动占全部活动的百分比
图1 不同数据源提取的上海市顾村大型居住社区居民活动空间分布对比
当然这种直观的判断不能代替科学的检验,在表1中是采用Kolmogorov-Smirnov检验,对两种数据源在交通大区尺度的空间分布是否相同进行一致性分析结果,其双侧检验显著性概率均有p>0.05,证实了两样本数据具有相同分布的假设。
表1 部分社区移动通信数据与调查数据Kolmogorov-Smirnov检验统计量
在移动通信所检测的活动点与传统技术概念中出行率之间也存在很大的关联性。在上海市选取了10个不同区位的地区,采用移动通信数据测定居住在该区域居民的活动点数量,并进一步与第四次综合交通调查获得的相同区域居民出行率进行比较(参见图2),可以清楚地看到这种关联性。
图2 上海市居民日均出行率与移动通信活动点回归分析结果
这样的实验结果令我们感到高兴,因为可以采用移动通信数据获得某些居民活动特征后,将其转换为传统基于出行OD概念技术体系中的部分参数。从而使得有可能在具有说服力检验基础上,在两次大规模综合交通调查之间(一般为5-10年),采用移动通信数据修正其中的部分参数。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在这个瞬息万变的时代,许多人都在寻找能让他们脱颖而出的职业。而数据分析师,作为大数据和人工智能时代的热门职业,自然吸引了 ...
2025-01-14Python作为一门功能强大的编程语言,已经成为数据分析和可视化领域的重要工具。无论你是数据分析的新手,还是经验丰富的专业人士 ...
2025-01-10完全靠数据决策,真的靠谱吗? 最近几年,“数据驱动”成了商界最火的关键词之一,但靠数据就能走天下?其实不然!那些真正成功 ...
2025-01-09SparkSQL 结构化数据处理流程及原理是什么?Spark SQL 可以使用现有的Hive元存储、SerDes 和 UDF。它可以使用 JDBC/ODB ...
2025-01-09在如今这个信息爆炸的时代,数据已然成为企业的生命线。无论是科技公司还是传统行业,数据分析正在深刻地影响着商业决策以及未来 ...
2025-01-08“数据为王”相信大家都听说过。当前,数据信息不再仅仅是传递的媒介,它成为了驱动经济发展的新燃料。对于企业而言,数据指标体 ...
2025-01-07在职场中,当你遇到问题的时候,如果感到无从下手,或者抓不到重点,可能是因为你掌握的思维模型不够多。 一个好用的思维模型, ...
2025-01-06在现代企业中,数据分析师扮演着至关重要的角色。每天都有大量数据涌入,从社交媒体到交易平台,数据以空前的速度和规模生成。面 ...
2025-01-06在职场中,许多言辞并非表面意思那么简单,有时需要听懂背后的“潜台词”。尤其在数据分析的领域里,掌握常用术语就像掌握一门新 ...
2025-01-04在当今信息化社会,数据分析已成为各行各业的核心驱动力。它不仅仅是对数字进行整理与计算,而是在数据的海洋中探寻规律,从而指 ...
2025-01-03又到一年年终时,各位打工人也迎来了展示成果的关键时刻 —— 年终述职。一份出色的年终述职报告,不仅能全面呈现你的工作价值, ...
2025-01-03在竞争激烈的商业世界中,竞品分析对于企业的发展至关重要。今天,我们就来详细聊聊数据分析师写竞品分析的那些事儿。 一、明确 ...
2025-01-03在数据分析的江湖里,有两个阵营总是争论不休。一派信奉“大即是美”,认为数据越多越好;另一派坚守“小而精”,力挺质量胜于规 ...
2025-01-02数据分析是一个复杂且多维度的过程,从数据收集到分析结果应用,每一步都是对信息的提炼与升华。可视化分析结果,以图表的形式展 ...
2025-01-02在当今的数字化时代,数据分析师扮演着一个至关重要的角色。他们如同现代企业的“解密专家”,通过解析数据为企业提供决策支持。 ...
2025-01-02数据分析报告至关重要 一份高质量的数据分析报告不仅能够揭示数据背后的真相,还能为企业决策者提供有价值的洞察和建议。 年薪 ...
2024-12-31数据分析,听起来好像是技术大咖的专属技能,但其实是一项人人都能学会的职场硬核能力!今天,我们来聊聊数据分析的核心流程,拆 ...
2024-12-31提到数据分析,你脑海里可能会浮现出一群“数字控”抱着电脑,在海量数据里疯狂敲代码的画面。但事实是,数据分析并没有你想象的 ...
2024-12-31关于数据分析师是否会成为失业高危职业,近年来的讨论层出不穷。在这个快速变化的时代,技术进步让人既兴奋又不安。今天,我们从 ...
2024-12-30数据分析师在现代企业中扮演着关键角色,他们的工作内容不仅丰富多样,还对企业的决策和发展起着重要的作用。正如一个经验丰富的 ...
2024-12-29