2022年大数据及其在城市智能交通系统中的应用综述 .pdf
《2022年大数据及其在城市智能交通系统中的应用综述 .pdf》由会员分享,可在线阅读,更多相关《2022年大数据及其在城市智能交通系统中的应用综述 .pdf(8页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、第15卷 第 5 期2015 年 10 月交通运输系统工程与信息Journal of Transportation SystemsEngineering and Information TechnologyVol.15 No.5October 2015文章编号: 1009-6744(2015) 05-0045-08中图分类号:U491.1文献标志码:A大数据及其在城市智能交通系统中的应用综述陆化普*, 孙智源,屈闻聪(清华大学交通研究所, 北京 100084)摘要:大数据给城市智能交通系统的技术发展与应用革新带来了机遇和挑战.从交通大数据的基本概念、交通大数据带来的问题和大数据驱动的数学建模方
2、法等方面,阐述了交通大数据给智能交通系统带来的变革.为了深入理解交通大数据的内涵,分析交通大数据的产生背景,提出了交通大数据的 “6V” 特征,总结了智能交通系统中大数据的基本类型 .面对交通大数据带来的数据安全、网络通信、计算效率和数据存储等诸多问题,提出了应对策略和思路.对数据驱动的建模方法进行了分析,说明了混合模型的意义.最后,讨论了大数据驱动的智能交通系统的体系框架.关键词:智能交通;交通大数据;数据驱动;智能交通系统Big Data and Its Applicationsin UrbanIntelligentTransportationSystemLU Hua-pu, SUN Zh
3、i-yuan , QU Wen-cong(Institute of Transportation Engineering, Tsinghua University , Beijing 100084, China)Abstract:Big data brings both opportunities andchallenges to technological development and applicationinnovation of urban intelligent transportation system. Significant changes of ITS, which bro
4、ught by trafficbig data, are shown in three aspects:the concept of traffic big data,problems brought by traffic big data,andbig-data-driven basedmathematic modeling methods. This paper is intended to deeply understand big data,the background and category of traffic big data are sketched, the “6V”cha
5、racteristics of traffic big data areproposed, the basic types of traffic big data in ITS are summarized. Strategiesand ideas are presentedbasedon the problems of traffic big data, namely, data security, network communication, computational efficiency,anddata storage. This paper also analyzes the met
6、hod of datadriven model, and describesthe significance ofhybrid model. Finally, system framework of ITS basedon traffic big data is proposed.Key words:intelligent transportation; traffic big data;data driven; intelligent transportation system01引言随着信息技术、 通信技术、计算机技术等的快速发展,数字城市(Digital City)与智慧城市 (Smar
7、tCtiy) 接踵而来 .1998 年 1月, 美国前副总统戈尔发表了题为“数字地球新世纪人类星球之认识(The Digital Earth: Understanding our planet in the收稿日期:2015-02-04修回日期:2015-08-30录用日期:2015-09-09基金项目: “十二五”国家科技支撑计划 (2014BAG01B04-03) ; 国家自然科学基金 (51408023) ; 清华大学苏州汽车研究院(吴江) 返校经费课题 (2015WJ-B-02 ) .作者简介:陆化普(1957-) , 男, 辽宁铁岭人,教授 .*通信作者:名师资料总结 - - -精品
8、资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 1 页,共 8 页 - - - - - - - - - 交通运输系统工程与信息2015年 10月21st Century)” 的 演说 , 数 字 地 球的 概 念 由 此 产生1.2008年 11 月, 时任 IBM 董事长兼 CEO的彭明盛发布了题为 “智慧地球: 下一代领导人议程(ASmarter Planet: The Next Leadership Agenda)” 的主题报告,正式提出了 “智慧地球”(Smart Planet)的概念2.数字城市和智慧
9、城市都是美国的舶来品,二者都是信息化背景下现代城市发展的高级形态.当前, 英国提出了“数字英国 (Digital Britain) ” 计划3,韩国提出了“U-Korea ” 战略和“U-City ” 综合计划4,我国于 2013年前后开展智慧城市试点示范工作5.数字城市与智慧城市的建设促进了移动互联网、物联网、云计算等技术的发展,并直接推动了大数据(Big data )时代的来临 .2008 年, Nature 出版了“BigData”专 刊6;2011 年 ,Science 出 版 了“Dealing with Data” 专刊7.2012 年,美国政府正式发布了“大数据研究和发展倡议”8
10、; 我国于 2011年发布了“物联网十二五 发展规划” , 并陆续发布了一系列的发展规划与白皮书.在交通领域, 传统的数据采集向电子化设备与高级应用转变, 助力交通大数据的形成与发展.从传统的感应线圈和微波雷达等固定检测、基于浮动车的移动检测,向北斗卫星导航系统9、 智能手机10等新型检测手段, 以及集约的交通传感器布局11和稳定的多源数据融合12方向发展 .交通大数据为 “感知现在、 预测未来、 面向服务”13提供了最基本的数据支撑,是解决城市交通问题的最基本条件,是制定宏观城市交通发展战略和建设规划,进行微观道路交通管理与控制的重要保障.数据是智能交通系统的基础,交通数据采集手段和处理方法
11、的深度革新将引领智能交通系统的变革 .在大数据背景下, 对交通大数据进行深度分析,明确交通大数据的基本概念,了解交通大数据带来的问题,理解大数据驱动的数学建模方法,探讨在智能交通系统中的应用具有非常重要的意义 .2交通大数据的基本概念2.1交通大数据的特征交通大数据与传统交通数据的不同主要体现在特征中 .当前对大数据特征的描述主要有:3V14、4V15和 5V16等 .结合交通大数据的基本类型,认为交通大数据具有6V 特征, 具体如表 1所示 .表 1交通大数据的特征Table 1Characteristicsof traffic big data特 征Volume: 体量巨大Velocity
12、: 处理快速Variety: 模态多样Veracity: 真假共存Value: 价值丰富Visualization : 可视化描 述结构化数据和非结构化数据的广泛来源与长期存储交通流具有时变性, 交通管理与服务具有时效性,需要较快的数据处理速度数据来源广泛、 类型丰富,交通系统具有多状态特征数据存在缺失、 错误、 冗余等异常现象具有时间、空间、 历史等多维特征, 是多元服务的基础交通运行状态、城市路网特性等需要可视化的展现2.2智能交通系统中的大数据根据数据来源分布,智能交通系统中的大数据划分如表2所示 .(1) 交通流数据 (固定检测器 ) .传统固定检测器获取的交通流数据为智能交通系统的传
13、统应用提供了基础数据支撑.以北京为例, 基于微波雷达、 超声波、感应线圈、 视频监控等检测器,北京市公安局公安交通管理局建立了交通信息采集、 处理、发布系统, 北京市道路交通流预测预报系统17等.表 2智能交通系统中的大数据Table 2Big data in ITS类 型交通流数据(固定检测器)交通流数据(移动检测器)位置数据(移动检测)非结构化视频数据多源互联网、政务网数据检测手段感应线圈、微波雷达、地磁等安装 GPS的出租车、公交车等智能卡、车载终端、手持终端等视频检测器等互联网、政务网等获取参数速度、 流量、占有率、旅行时间等瞬时速度、旅行时间、旅行速度等GPS位置信息等视频监控图像等
14、多类型参数等46名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 2 页,共 8 页 - - - - - - - - - 第 15卷 第 5 期大数据及其在城市智能交通系统中的应用综述(2)交通流数据(移动检测器 ) .通过固定检测器与移动检测器的数据融合18,获取更加准确的交通流数据.以北京为例, 北京市公安局公安交通管理局开展了“北京市道路交通流综合分析与数据质量评价体系研究”的项目,对固定检测器、 移动检测器等获取的多源数据进行研究,优化交通数据质量19.(3)位置数据(移动检测
15、 ) .先进的移动通信技术拓展了交通移动检测的应用范围, 由传统的交通流数据获取推广到位置数据的获取, 使得基于位置的服务成为可能.基于公交智能卡的数据,实现出行者出行行为的分析,为公交基础设施建设和运营服务管理提供支持20.基于出租车车载终端的数据,研究出行距离、出行时间和道路偏好对驾驶员路径选择的影响,进而实现路径的预测21.应用智能手机,可实现出行轨迹、 出行方式、 出行范围、 出行总量等的获取22 , 23.此外,车联网的出现大大提高了城市交通信息综合获取的水平,丰富了交通数据来源和发布途径24,25.海量位置数据的处理和分析,为交通出行行为分析26, 公交系统优化27, 车辆优先控制
16、28等提供了支撑.(4)非结构化视频数据非结构化视频数据一方面可用于宏观态势监控,以广西柳州为例,建设高空高清视频监控系统,掌控多交叉口或较大区域的交通宏观态势 .一方面, 通过视频处理模块,提供交通流特征参数及其他参数,以卡口系统、 电子警察系统等为例,还可应用于车辆类型识别29、 交通状态识别30等.(5)多源的互联网、 政务网数据互联网、政务网为智能交通系统提供了广泛的数据来源与发布途径.以社交网络为代表的互联网可为智能交通系统提供交通事件的视频等数据 .另外,互联网也可成为交警非现场执法、公交系统优化等的重要数据来源.政务网为城市决策者和管理者提供了安全稳定的信息交互平台.通过政务网,
17、可为智能交通系统接入城市路网结构、气象变化、 特大活动、 突发事件、 应急救援等数据 .3交通大数据带来的问题3.1 数据安全问题交通大数据具有 “Value” 特征,蕴含了众多的信息,有些信息涉及国家安全,例如,公安网传输的数据;有些信息涉及个人隐私,例如,卡口系统检测的车辆轨迹数据.在交通大数据采集、传输、存储、处理、应用等过程中, 数据安全问题非常重要.智能交通系统依托智能交通专网进行系统内部的数据传输, 以及与外网之间的数据交互时,必须符合规范和标准, 保证网络安全31.另外,在数据处理过程中, 需要遵循隐私保护机制,应用隐私保护方法32.交通大数据具有 “Veracity” 特征,去
18、伪存真是数据安全的另一重要问题.大量的冗余数据和错误数据不仅占据大量的存储空间,浪费存储资源, 还会大大降低数据分析的有效性和稳定性33.进行异常数据识别, 缺失数据补充, 错误数据修正, 冗余数据消除具有非常重要的意义.3.2 网络通信问题交 通 大 数 据 具 有“Volume”、 “Velocity ”、“Visualization ” 特征,要求网络通信要满足大容量数据的快速、 稳定传输,特别是高清视频图像数据.交通大数据的 “Variety” 特征决定网络通信方式的多样化 .目前,城市建立智能交通系统多采用自建专网、租用城市公网相结合的模式,具备有线通信与无线通信并存且互通特征.智能
19、交通系统常用的网络通信技术包括:有线电缆、 光纤通信网络、 无线传感网络、移动通信系统、 卫星定位系统等.3.3 计算效率问题交通大数据具有 “Velocity ” 特征,要求智能交通系统具备较高的计算效率,例如,交通数据预处理, 交通状态识别, 短时交通流预测, 实时交通流控制,动态交通诱导, 实时公交调度等均具有时效性要求 .云计算技术的发展带来了新的解决方案,智能交通云的概念由此提出34.基于云计算技术,使得计算机硬件和软件得到有效利用,提高智能交通系统的计算效率.3.4 数据存储问题交通大数据具有 “Volume” 特征,特别是长时间序列的非结构化数据积累,给数据存储带来了47名师资料
20、总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 3 页,共 8 页 - - - - - - - - - 交通运输系统工程与信息2015年 10月巨大的压力 .存储技术的发展远赶不上数据增长的速度,大量存储服务器的购买提高了智能交通系统的建设成本, 并占用了数据中心的建筑面积.当前智能交通系统均采取缩短数据保存时限,降低数据存储质量的方式来减少存储成本,影响了大数据的价值 .云存储技术的发展带来了新的解决方案,基于云存储与智能压缩算法可以初步解决大数据的存储问题.4大数据驱动的数学建模方法20
21、00 年,美国自然科学基金会(NSF)首次提出 了 动 态 数 据 驱 动 应 用 系 统(Dynamic DataDriven Application Systems ) 的概念35.数据驱动模型与机理模型、 知识模型同属常用的数学建模方法.机理模型从本质上反映客观规律,但是,建模过程繁琐,参数标定难度较大; 知识模型以经验总结为基础,模型简单易于实现, 但是,模型精度较低,研究对象的复杂性具有局限性;数据驱动模型从数据出发, 是一个自下而上的建模过程,无需了解机理,精度较高,但是,模型的可解释性较低,模型推广性能较弱.对于复杂系统, 特别是在某些情况下, 机理模型不可行或难度较大,知识模型
22、的精度较低,数据驱动模型的意义凸显.常用的数据驱动方法如表 3所示 .表 3传统数据驱动方法Table 3Traditionalbig data driven method方 法线性回归人工神经网络支持向量机模糊系统强化学习特 征无需建立复杂的数据模型,应用统计方法发现自变量与因变量之间的关系应用计算机技术模拟人脑思维功能和组织结构,无需先验知识, 根据输入和输出关系建立模型侧重数学方法和优化技术, 根据有限样本信息在模型复杂性和学习能力之间寻找平衡点以模糊数学为基础, 可以与聚类算法、 优化控制、神经网络、petri 网等组合使用机器学习的主要方法之一,强调从环境到行为映射的学习,以使强化信
23、号函数值最大应用举例基于多元线性回归的交通安全分析36基于 RBF 神经网络的短时交通流预测模型37基于支持向量机的交通状态分类算法38基于模糊神经网络的道路交通流检测器布设39基于强化学习的自适应交通信号控制40大数据概念的提出,推动了大数据驱动思想的产生,促进了机理模型、 知识模型和数据驱动模型的混合使用.在大数据的背景下, 机理模型、知识模型和数据驱动模型存在相互渗透、优势互补的关系,3种模型构成的混合模型具有较好的应用前景 .依据知识和数据, 简化机理模型, 并将数据驱动模型结合在一起, 完成模型标定, 互为补充 .机理和知识可以优化数据, 减少噪声, 确定合适的训练样本, 提高模型鲁
24、棒性.以基于时间序列、 空间数据和历史数据的短时交通流预测为例,知识模型用于初步确定与研究对象路段相关的数据集合,确定合适的训练样本;机理模型用于标定基于组合模型的短时交通流预测方法;数据驱动模型用于发现组合模型误差与交通状态的模式匹配关系,实验表明混合模型具有较高的精度.5大数据驱动的智能交通系统交通大数据给智能交通系统带来了变革,主要体现在基本概念、 面临问题和建模方法等3个方面.面向上述变革, 研究大数据驱动的智能交通系统具有重要的意义, 体系框架如图1所示 .(1)感知对象 .大数据驱动的智能交通系统具有海量的监控对象 .智能交通系统的感知对象从人、车、 路、 环境四个方面展开, 包括
25、:个体出行、营运车辆、 交通管理和静态系统等.(2)全面感知 .大数据驱动的智能交通系统具有多样的检测手段和丰富的数据来源.针对城市交通数据源的分布情况和智能交通系统的数据需求,以固定检测和移动检测构成的传统交通信息采集系统为依48名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 4 页,共 8 页 - - - - - - - - - 第 15卷 第 5 期大数据及其在城市智能交通系统中的应用综述托, 拓展交通数据源的类型和数量,增加新型交通数据采集的使用,实现城市交通及相关系统的全面
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 2022年大数据及其在城市智能交通系统中的应用综述 2022 数据 及其 城市 智能 交通 系统 中的 应用 综述
限制150内