大数据及其在城市智能交通系统中的应用综述-陆化普-百度概要.doc
《大数据及其在城市智能交通系统中的应用综述-陆化普-百度概要.doc》由会员分享,可在线阅读,更多相关《大数据及其在城市智能交通系统中的应用综述-陆化普-百度概要.doc(14页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、精品文档,仅供学习与交流,如有侵权请联系网站删除第 15卷 第 5期 2015年 10月交通运输系统工程与信息Journal of Transportation Systems Engineering and Information TechnologyV ol.15No.5 October 2015文章编号:1009-6744(2015 05-0045-08中图分类号:U491.1文献标志码:A 大数据及其在城市智能交通系统中的应用综述 陆化普 *, 孙智源, 屈闻聪(清华大学 交通研究所, 北京 100084摘 要:大数据给城市智能交通系统的技术发展与应用革新带来了机遇和挑战 . 从交 通
2、大数据的基本概念、 交通大数据带来的问题和大数据驱动的数学建模方法等方面, 阐 述了交通大数据给智能交通系统带来的变革 . 为了深入理解交通大数据的内涵, 分析交通 大数据的产生背景, 提出了交通大数据的 “ 6V ” 特征, 总结了智能交通系统中大数据的基 本类型 . 面对交通大数据带来的数据安全、 网络通信、 计算效率和数据存储等诸多问题, 提 出了应对策略和思路 . 对数据驱动的建模方法进行了分析, 说明了混合模型的意义 . 最后, 讨论了大数据驱动的智能交通系统的体系框架 .关键词:智能交通; 交通大数据; 数据驱动; 智能交通系统Big Data and Its Applicatio
3、ns in Urban Intelligent Transportation SystemLUHua-pu , SUNZhi-yuan , QU Wen-cong(Institute of Transportation Engineering , Tsinghua University , Beijing 100084, China Abstract:Big data brings both opportunities and challenges to technological development and application innovation of urban intellig
4、ent transportation system. Significant changes of ITS, which brought by traffic big data, are shown in three aspects:the concept of traffic big data, problems brought by traffic big data, and big-data-driven based mathematic modeling methods. This paper is intended to deeply understand big data, the
5、 background and category of traffic big data are sketched, the “ 6V ” characteristics of traffic big data are proposed, the basic types of traffic big data in ITS are summarized. Strategies and ideas are presented based on the problems of traffic big data, namely, data security, network communicatio
6、n, computational efficiency, and data storage. This paper also analyzes the method of data driven model, and describes the significance of hybrid model. Finally, system framework of ITS based on traffic big data is proposed.Key words:intelligent transportation; traffic big data; data driven; intelli
7、gent transportation system1引 言随着信息技术、 通信技术、 计算机技术等的快 速发展, 数字城市 (Digital City 与智慧城市 (SmartCtiy 接踵而来 .1998年 1月, 美国前副总统戈尔发 表了题为 “数字地球 新世纪人类星球之认识 (The Digital Earth:Understanding our planet in the收稿日期:2015-02-04修回日期:2015-08-30录用日期:2015-09-09基金项目:“ 十二五” 国家科技支撑计划 (2014BAG01B04-03 ; 国家自然科学基金 (51408023 ; 清华
8、大学苏州汽车研究院 (吴 江 返校经费课题 (2015WJ-B-02 .作者简介:陆化普 (1957- , 男, 辽宁铁岭人, 教授 . *通信作者:luhpDOI:10.16097/ki.1009-6744.2015.05.007交通运输系统工程与信息 2015年 10月21st Century ” 的 演 说 , 数 字 地 球 的 概 念 由 此 产 生 1.2008年 11月, 时任 IBM 董事长兼 CEO 的彭明 盛发布了题为 “智慧地球:下一代领导人议程 (A Smarter Planet:The Next Leadership Agenda ” 的主 题报告, 正式提出了 “智
9、慧地球” (Smart Planet 的 概念 2. 数字城市和智慧城市都是美国的舶来品, 二 者都是信息化背景下现代城市发展的高级形态 . 当 前, 英国提出了 “数字英国 (Digital Britain ” 计划 3, 韩国提出了 “ U-Korea ” 战略和 “ U-City ” 综合计划 4, 我国于 2013年前后开展智慧城市试点示范工作 5. 数字城市与智慧城市的建设促进了移动互联 网、 物联网、 云计算等技术的发展, 并直接推动了 大数据 (Big data 时代的来临 .2008年, Nature 出版 了 “ Big Data ” 专 刊 6; 2011年 , Scien
10、ce 出 版 了 “ Dealing with Data ” 专刊 7.2012年, 美国政府正式 发布了 “大数据研究和发展倡议” 8; 我国于 2011年 发布了 “物联网 十二五 发展规划” , 并陆续发布 了一系列的发展规划与白皮书 .在交通领域, 传统的数据采集向电子化设备 与高级应用转变, 助力交通大数据的形成与发展 . 从传统的感应线圈和微波雷达等固定检测、 基于 浮动车的移动检测, 向北斗卫星导航系统 9、 智能 手机 10等新型检测手段, 以及集约的交通传感器布 局 11和稳定的多源数据融合 12方向发展 . 交通大数 据为 “感知现在、 预测未来、 面向服务” 13提供了最
11、 基本的数据支撑, 是解决城市交通问题的最基本 条件, 是制定宏观城市交通发展战略和建设规划, 进行微观道路交通管理与控制的重要保障 .数据是智能交通系统的基础, 交通数据采集 手段和处理方法的深度革新将引领智能交通系统 的变革 . 在大数据背景下, 对交通大数据进行深度 分析, 明确交通大数据的基本概念, 了解交通大 数据带来的问题, 理解大数据驱动的数学建模方 法, 探讨在智能交通系统中的应用具有非常重要 的意义 .2交通大数据的基本概念2.1交通大数据的特征交通大数据与传统交通数据的不同主要体现 在特征中 . 当前对大数据特征的描述主要有:3V 14、 4V 15和 5V 16等 . 结
12、合交通大数据的基本类型, 认为 交通大数据具有 6V 特征, 具体如表 1所示 .表 1交通大数据的特征Table 1Characteristics of traffic bigdata2.2智能交通系统中的大数据根据数据来源分布, 智能交通系统中的大数 据划分如表 2所示 .(1 交通流数据 (固定检测器 .传统固定检测器获取的交通流数据为智能交 通系统的传统应用提供了基础数据支撑 . 以北京为 例, 基于微波雷达、 超声波、 感应线圈、 视频监控等 检测器, 北京市公安局公安交通管理局建立了交 通信息采集、 处理、 发布系统, 北京市道路交通流 预测预报系统 17等 .表 2智能交通系统中
13、的大数据 Table 2Big data inITS46第 15卷 第 5期 大数据及其在城市智能交通系统中的应用综述(2交通流数据 (移动检测器 .通过固定检测器与移动检测器的数据融合 18, 获取更加准确的交通流数据 . 以北京为例, 北京市 公安局公安交通管理局开展了 “北京市道路交通 流综合分析与数据质量评价体系研究” 的项目, 对 固定检测器、 移动检测器等获取的多源数据进行 研究, 优化交通数据质量 19.(3位置数据 (移动检测 .先进的移动通信技术拓展了交通移动检测的 应用范围, 由传统的交通流数据获取推广到位置 数据的获取, 使得基于位置的服务成为可能 . 基于 公交智能卡的
14、数据, 实现出行者出行行为的分 析, 为公交基础设施建设和运营服务管理提供支 持 20. 基于出租车车载终端的数据, 研究出行距 离、 出行时间和道路偏好对驾驶员路径选择的影 响, 进而实现路径的预测 21. 应用智能手机, 可实 现出行轨迹、 出行方式、 出行范围、 出行总量等的 获取 22, 23. 此外, 车联网的出现大大提高了城市交 通信息综合获取的水平, 丰富了交通数据来源和 发布途径 24, 25. 海量位置数据的处理和分析, 为交 通出行行为分析 26, 公交系统优化 27, 车辆优先控 制 28等提供了支撑 .(4非结构化视频数据非结构化视频数据一方面可用于宏观态势 监控, 以
15、广西柳州为例, 建设高空高清视频监控 系统, 掌控多交叉口或较大区域的交通宏观态 势 . 一方面, 通过视频处理模块, 提供交通流特征 参数及其他参数, 以卡口系统、 电子警察系统等 为例, 还可应用于车辆类型识别 29、 交通状态识 别 30等 .(5多源的互联网、 政务网数据互联网、 政务网为智能交通系统提供了广泛 的数据来源与发布途径 . 以社交网络为代表的互 联网可为智能交通系统提供交通事件的视频等 数据 . 另外, 互联网也可成为交警非现场执法、 公 交系统优化等的重要数据来源 . 政务网为城市决 策者和管理者提供了安全稳定的信息交互平台 . 通过政务网, 可为智能交通系统接入城市路
16、网 结构、 气象变化、 特大活动、 突发事件、 应急救援 等数据 .3交通大数据带来的问题3.1数据安全问题交通大数据具有 “ Value ” 特征, 蕴含了众多的 信息, 有些信息涉及国家安全, 例如, 公安网传输 的数据; 有些信息涉及个人隐私, 例如, 卡口系统 检测的车辆轨迹数据 . 在交通大数据采集、 传输、 存储、 处理、 应用等过程中, 数据安全问题非常重 要 . 智能交通系统依托智能交通专网进行系统内 部的数据传输, 以及与外网之间的数据交互时, 必 须符合规范和标准, 保证网络安全 31. 另外, 在数据 处理过程中, 需要遵循隐私保护机制, 应用隐私保 护方法 32.交通大
17、数据具有 “ Veracity ” 特征, 去伪存真是 数据安全的另一重要问题 . 大量的冗余数据和错误 数据不仅占据大量的存储空间, 浪费存储资源, 还 会大大降低数据分析的有效性和稳定性 33. 进行异 常数据识别, 缺失数据补充, 错误数据修正, 冗余 数据消除具有非常重要的意义 .3.2网络通信问题交 通 大 数 据 具 有 “ V olume ” 、 “ Velocity ” 、 “ Visualization ” 特征, 要求网络通信要满足大容量 数据的快速、 稳定传输, 特别是高清视频图像数据 . 交通大数据的 “ Variety ” 特征决定网络通信方式的 多样化 . 目前,
18、城市建立智能交通系统多采用自建 专网、 租用城市公网相结合的模式, 具备有线通信 与无线通信并存且互通特征 . 智能交通系统常用的 网络通信技术包括:有线电缆、 光纤通信网络、 无 线传感网络、 移动通信系统、 卫星定位系统等 . 3.3计算效率问题交通大数据具有 “ Velocity ” 特征, 要求智能交 通系统具备较高的计算效率, 例如, 交通数据预处 理, 交通状态识别, 短时交通流预测, 实时交通流 控制, 动态交通诱导, 实时公交调度等均具有时效 性要求 . 云计算技术的发展带来了新的解决方案, 智能交通云的概念由此提出 34. 基于云计算技术, 使得计算机硬件和软件得到有效利用,
19、 提高智能 交通系统的计算效率 .3.4数据存储问题交通大数据具有 “ V olume ” 特征, 特别是长时 间序列的非结构化数据积累, 给数据存储带来了47交通运输系统工程与信息 2015年 10月巨大的压力 . 存储技术的发展远赶不上数据增长的 速度, 大量存储服务器的购买提高了智能交通系 统的建设成本, 并占用了数据中心的建筑面积 . 当 前智能交通系统均采取缩短数据保存时限, 降低 数据存储质量的方式来减少存储成本, 影响了大 数据的价值 . 云存储技术的发展带来了新的解决方 案, 基于云存储与智能压缩算法可以初步解决大 数据的存储问题 .4大数据驱动的数学建模方法2000年, 美国
20、自然科学基金会 (NSF 首次提 出 了 动 态 数 据 驱 动 应 用 系 统(Dynamic Data Driven Application Systems 的概念 35. 数据驱动模 型与机理模型、 知识模型同属常用的数学建模方 法 . 机理模型从本质上反映客观规律, 但是, 建模过 程繁琐, 参数标定难度较大; 知识模型以经验总结 为基础, 模型简单易于实现, 但是, 模型精度较低, 研究对象的复杂性具有局限性; 数据驱动模型从 数据出发, 是一个自下而上的建模过程, 无需了解 机理, 精度较高, 但是, 模型的可解释性较低, 模型 推广性能较弱 . 对于复杂系统, 特别是在某些情况
21、下, 机理模型不可行或难度较大, 知识模型的精度 较低, 数据驱动模型的意义凸显 . 常用的数据驱动 方法如表 3所示 .表 3传统数据驱动方法Table 3Traditional big data drivenmethod大数据概念的提出, 推动了大数据驱动思想 的产生, 促进了机理模型、 知识模型和数据驱动模 型的混合使用 . 在大数据的背景下, 机理模型、 知识 模型和数据驱动模型存在相互渗透、 优势互补的 关系, 3种模型构成的混合模型具有较好的应用前 景 . 依据知识和数据, 简化机理模型, 并将数据驱动 模型结合在一起, 完成模型标定, 互为补充 . 机理和 知识可以优化数据, 减
22、少噪声, 确定合适的训练样 本, 提高模型鲁棒性 . 以基于时间序列、 空间数据和 历史数据的短时交通流预测为例, 知识模型用于 初步确定与研究对象路段相关的数据集合, 确定 合适的训练样本; 机理模型用于标定基于组合模 型的短时交通流预测方法; 数据驱动模型用于发 现组合模型误差与交通状态的模式匹配关系, 实 验表明混合模型具有较高的精度 . 5大数据驱动的智能交通系统交通大数据给智能交通系统带来了变革, 主 要体现在基本概念、 面临问题和建模方法等 3个方 面 . 面向上述变革, 研究大数据驱动的智能交通系 统具有重要的意义, 体系框架如图 1所示 .(1感知对象 .大数据驱动的智能交通系
23、统具有海量的监控 对象 . 智能交通系统的感知对象从人、 车、 路、 环境 四个方面展开, 包括:个体出行、 营运车辆、 交通管 理和静态系统等 .(2全面感知 .大数据驱动的智能交通系统具有多样的检测 手段和丰富的数据来源 . 针对城市交通数据源的分 布情况和智能交通系统的数据需求, 以固定检测 和移动检测构成的传统交通信息采集系统为依48第 15卷 第 5期 大数据及其在城市智能交通系统中的应用综述托, 拓展交通数据源的类型和数量, 增加新型交通 数据采集的使用, 实现城市交通及相关系统的全 面感知 . 全面感知体现在多样的数据格式和数据类 型上. 图 1智能交通系统的体系框架 Fig.
24、1System framework of ITS4950 交通运输系统工程与信息 2015 年 10 月 (3)网络通信. 大数据驱动的智能交通系统具有快速的网络 通信. 针对交通大数据的实时传输要求, 建立有线 通信、 长距离和短距离无线通信构成的互联互通 信道, 实现数据源、 智能交通系统、 服务对象的数 据交互. 智能交通专网作为数据交互的中心, 与互 联网、 政务网、 公安网等连接, 网络接口具备合乎 规范的网闸, 以保障网络通信的安全运行. (4)中心平台. 大数据驱动的智能交通系统具有高效的数据 处理、 存储、 共享与应用.中心平台承担了智能交通 系统的数据挖掘、 数据存储、 数据
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 及其 城市 智能 交通 系统 中的 应用 综述 陆化普 百度 概要
限制150内