智慧城市运营中心建设方案(实践版).docx
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_05.gif)
《智慧城市运营中心建设方案(实践版).docx》由会员分享,可在线阅读,更多相关《智慧城市运营中心建设方案(实践版).docx(61页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、智慧城市运营中心建设方案(实践版)221.1总体架构设计底2裁据管理平台架拘设计数据标唯规范:提供质量标准、编码标准、安全标准、共享交换标准、 数据字典等一些列标准建设,为数据平台各E执行提供规诲据;数据监控:对平台的数据生产全过程、数据服务、数据溯源流向进行监 控;对用户行为和系统日志进行监控,保证数据平台每一个节点的跟踪监管。数据汇聚:通过与市数据汇聚共享平台建立数据对接通道来获取数据, 运行综合管理中心数据平台支持接口上架方式将教据汇聚到市数据汇聚共享 平台,并提供ETL同步工具对接市数据汇聚共享平台,将数据实时或者定时同步至数据资源池;数据管理:通过数据资源敬据交换传输作为通道,实现数
2、据的交换、数 据采夹、数据检威数据清洗加工、数据脱敏等功旭与已建汇聚共亨平台对接、再通近本平台匕身数据共集、 检测、清洗、加工来实现市数据的整合工作;管理平台:厕量管款包括检测规则和任务,对数据质量避 行检测,提 高数据质量;安全管理对数据进行脱敏保证数据安全性;数据资源管理包括 数据目录、元数据目录、月艮务目录管理、通用管理、资源管理、服务管理 等;组件管理包括基福组 件、用户服务组件、系统管理和监控管理组件;展现房:通过统一的平刍门户,为用户提供数据服务,包括数据展现、 数据分析、信息推送、效据查询,提供友好的界面展示系统功能、接收用户 晴求,并以统一的API接口形式实现城市运行综合管理中
3、心各皆慧应用的共享。221.2大数据平台管理大数据平台管理功能是支撑平台的基础应用保障系统安全、可靠运行。 主要功能包括基碓服务组件、系统管理组件、用户管理组件及监控管理组件 等功能应用o基础服务组件实现杷存储、数据库、中间件、分布式计算、搜索、消息 推送等资源 和能力以云服务的形式提供给用户,为各类应用提供云计算模式的存储和计 算服务。1 系统管奥组件包括系统维护、月艮务日志管理。1、系统维护系统维护主要完成系统功能管理、数据字典的维护。系统功能管理:系统功能菜单的管理缱护,方便根据喜好 调整系统功能菜单。薮据字典:数据宇舆的维护管理。2、服务日古管理服务日志管理提供给系统管坦人员进行查看服
4、务管理库存 储的服务管 理系统的服务的日志,包括对服务情况、服务目录查看、对夕卜提供服务调 用等记载的日志记录,并对这些日志提 供相应的管理和维护功能。用户管理组件1、行政区划支持行政区划树的管理.支持中央、省、市、县、乡镇、村委会6级行 政区划管理,能够较好的支持行政区划管理及导航的需要。2、组织机构支持组织机构树的管理,支持自定义组织类型,能够较好 的支持组织 内人力资源管理的需要。3、用户管理用户基本信息管理包括账号管理、电子档案、用户关系管 理及用户权 限等功能。账号管理包括账号基本信息、头像信息、第三方账号绑定管 理、提醒没置等;电子档案是用户在线的档 案管理中心,用户可以上传、 变
5、更、删除个人的电子档案,土传的电子档案,经用户授权后,可供其他 业务系统使用。4、权限管理权限管理是将用户、角色、应用(组件)、访问资源四个主体形成的 甫色矩阵管理,将用户的访问权限控制在应用资源访问上。5、统一认证.r感蛆褂燎盂咚注此 益距眠nl吊渤& Y#g粗灶 抵回 - 嚼帐部 4如聪削5后4既“耙眯眠渤frm vlr蚩刷fHlI我。抵眼一出削根咿蚩ern-mlM 聚乂痢枢H s Hfc匚氏至退帝麻川卷-眼 召工一1 E妄自旨 M i 4富斤亚号要口 十 S?fl4n(4措怛港tt吱占E3。认旺W如林建冬琲犯J 一能,一,川K全帐溯耶 O奏 冰史米食祖江旺坷 颐些*,尽朝林* 1旺维昭匡
6、用户管理中心根供了多神单点登录集成方式,针双不同的业务系统可 以根据实际场景选择相应的集成方式。单点登录为数据平台提供了统一的身 粉验证功能,实现一站式登录。目前,用户管理单点登录集成方式包括域内共享ses&on方式、域内共享cookie方式、跨域SAMLft成方式,及oauth单 点登录方 式。?共享session 方式i共享session方式合用于域内,并且技术实现相同的业务系统,如数 据平台应用接入平台与数据平台用户云空间属于同一个父域,并且都是基于 javaWeb技术开辟的,应用接入平刍 就可以与用户云空间通过共享session 方式;进行单点集成。?共亨cookie方式共享cooki
7、e同样仅合用于域内,但是对于技术实现没有限 制, ASR.NET、javaWeb. PHPS序都可以通过该方式与数据平台用户云空间 进行单点登录的集成。?跨域SAM余式跨域SAM岸点集成对于是否跨域、技术实现是否相同均无限制,任何 web业务系统理论上都可以与用户云空间进行单点集成。? Oauth登录方式Oauth登录方式是第三方应用集成用户系统最常用的方式,基于。auth 标准协议完成用户认证。22.1 2.4监控管理组件1、敏据监控?采集监控对于ETL数据采集过程的每一步,提哄可视化的在缱监控 系统。通过 监控系统,可以查看所有正在运行的转换任务、故 障历史等。监控记录中详 细描述了数据采
8、集的成功数目、失败 数目,转换时长、日志明细等。 ?数据审计为实施防抵赖,对于用户在使用系统期间的关键操作进行审计记录,主 要包括用户的数据上传记录、下载记录、修改记录、数据管理的关键操作步 骤等,管霆员可以根据需要实时查看审计日志,监控系统资源的使用情况, 以防范和化解系统安全雕。2、服务监控服务监控完成服务系统中已发布服务的服务调度、以及运行监控管理。监控管理中心是监控管理逻辑节点及部署在逻辑节点上面的项目、服务、 组件及业务流程等运行状况的集中管理监控环境。通过监控管理贰心,用户 可以查看逻辑节点及部署在逻辑节点上面的项目、服务、组件及业务流程等 运行晦、日志信息等,并能够对所监控的对象
9、进行如启动/住手等控制。 ?运行监控运行监控对服务目录中的所有服务进行数据和图形化约监控,包括对服 务的启动,住手,对服务的淄,使用情况等班行监控,同时集成业务流程引 擘、消息中可件、应用服务器等运行支撑环境的监控管珪功能,实现整个服 务管理系统的运行监?服务调度实现对服务目录中所有服务进行调度的功能,包括:服务的中止、服务 运行中的强制退出、服务的定时关闭和启动、服 务的条件触发等。221.3大数据管理服务数据标准规范显摸清信息资源的现状和特点。通过全面调查政府部门的业务、数据和信 息化情况,掌握并理清信息资源的类型和属性,明确数量和当前状态,使信 息资源目录发挥资源“台账”的作 用,将信息
10、资源细化、目录中的信息资源 要细化到文档表单和 重实指标项,今后通过目录的持续升级:最终细化到所 有指标项,并对重要指标项建立统一规范。22.1.3.2 数据标准管理数据标准是基于对数据的梳理,整理出数据元对应的数据字段的格式标 准。不同字段对应的数据元可以由系统自动识别 和匹配,同时也可以做自定 义设定。平台自动识别和匹配的榕式标准也可以根据实际需求做个性化的设 置和调整。2 2.1.3.3 数据资源管理数据质量的好坏决定了数据价值的高佐高质量的数据可以保证数据应 用、数据服务的质量。高质量的数据已成为组织最具价值的资产之,数据的 流通面临数据质量的问题,惟独高质量的数据才干保证数据应用和服
11、务的价 值.22.1.4.1 数据抽版数据抽取就是从数据中心的中心库中获取业务数据的过 程。数据来源 为业务系统和文件系统,抽取方式为根据具体业务进行全量抽取或者增量抽 取,根据具体业务制定抽取的时问、缜率、这些参薮都是可西己置的。抽取方式:1 .全量抽取:该抽取方式普通在数据初始化的时候使用。4数据源中的数据原封不动的从数据库中抽取出来。2 .增量抽取:我们采用基于时间戳的增量抽取.1)建立数据库连接定义一张数据字典表,定义需要进行处理的任务,其中主要包括业务数据库和目标数据库的表名、字段列表、以及条件等。2) 对照源表和目标表的目前最大时间,抽取数据时问断为【目标表的最大时间】一【原表的最
12、大时间】根据设置的捐取频率循环抽取。数据清洗薮据清洗指对前端抽取过来的数据进行清洗处理,包括数据过滤、数据剔重、类型转彳爰、编码映射、文件拆分与合并、军度转换等功 能。数据清洗的任务主要是进行不一致的数据转换、I据粒度的转换、数据去脏和一些转换规则的计算。其中不一致转换过程是数 据整合的过程,侧重于将来源于不同业务系统的相司类型的数据进行统一处 理;数据粒度转换需要*数据进行统一归整;转换规则计算按照设计的计算 归则对数据进行心贾算的数据质量和数据安全,我41涯过数据标准、数据 检测、数据清洗、数据加工、数据脱敏等功能来提升数据的价值。22.1.3.4 数据脱敏敏感数据,又称睑私数据,常见的敏
13、感数据有:姓名、身份证号码、地址、电话号码、银行账号、邮箱地址、所属域市、邮编、密码类 (如账户查询密码、取款密码、登录密码等)、组织机构名称、营业执照号码、银行帐号、交易日期、交易金额等。数据脱敏 又称薮据漂白、数据去隐私化或者数据变形,百度百科对数据脱敏的定义为: 指对某些敏感信息通过脱敏规则 进行数据的变形,实现敏感隐私数据的可靠 保护。这样,就页 以在开辟、测试和其它非生产环境以及外包环境中安全地使用脱敏后的真实数据集。大数据生命周期管理处理采集过来的数据,实现数据的清洗、转换、加载功能:一方面保障 采集的数据能正魂、完整、规范地加载到目的地;另一方面,实现数据整合过 程中的异常处理机
14、制,如:处理传输异常、数据加载异淆、数据结构与质量异 常等。薮据处理是数据中心的核心内容,系统需提供基础数据服务,主要步骤 包含或者据抽取、数据清洗、数据转换和数据加载等功能。数据处理是数据比对整合系统的核心,作为一个面向服务的平台,数据 清洗整合应用就是由多个数据服务组成的,其中包括一系列预定义的基础数 据处理,这些基础数据处理包括以下几个:3根据规则简单补齐数据 一致 性问 题一个特定的字段 在不同的表中内 容不同录入,同步问题选取最可靠的表中的字 段为确定值,也就是权 威数据应该成为主魂的值不惟一数据源中未建立有效的主键关系消除错误重复的主键数据转换薮据转换可以看做是数据整合和数想消洗过
15、程的结合,数据源的数据按照一定的转姒厕生成新的数据并存放至目的数据 源中。数据转换 支持数据字段之间一对多,多对以及多对多的映射关系。lookup,大转换规则:1.数据合并:多用表关联实现,大小表关联用 大表相交用join ;2数据拆分:按业务规则进行数据拆分;3 .行列互换;.排序/修改序号;4 .去除重复记录。数据加载数据加载主要指将抽取与清洗转换的数据,准确、及时地存储到不同 基础库中,依据数据的加载方式包括文件加载、流加载、压缩力谶、不落地 加载等。依据数据加载技术特点,可分为全量数据加参、滞才,宣一什、随着城市建设的不断推进,我国智慧城市发展逐渐呈现出一系列新的阶段性特 征,为满足新
16、时代下城市管理的需要,智慧城市的发展理念、建设思路、实施 路径、运行模式、技术手段等亟需全方位迭代升级。城市智慧运营中心是新型 智慧城市建设的核心要素之一,是未来城市的核心基础设施,已成为现阶段建 设数字中国、智慧社会的核心载体。IOC作为智慧城市的“神经中枢”,以大数据和系统融合为基础,可有效连接 散落在城市管理各个单元的数据资源,将城市各部门海量信息资源进行整合共 享,让高价值情报信息快速传递;并充分融合互联网+、大数据、云计算、人 工智能、可视化等前沿技术应用,将信息、技术、设备与城市管理需求有机结 合,充分发挥态势监测、应急指挥、展示汇报、流程管理、辅助决策等多重作 用,是城市管理的决
17、策中心、预警中心、管理中心、指挥中心、展示中心,有 效提升跨部门决策和资源协调指挥 效率。目录i s -潜ft淅成部研辩常渤Tffll君 tn/ M3二 1 y I TU_1J 1、 A I kF lFTT么11*io回W困醐H藏IX 耶普兽X EEMHH湖1箱靖滴T A Jt)成冲食S W 喉(S BftWW-月面薄导流域s 1nv u咽涅漏瀚 琶的洞0/旅滤r7li*ffi骨 11* 2 害!J LM雨籍? la值廿汨专灌f备 蒲渗泠非琵加帑挡聘耳M洛V落燃W牛4 耳避1海 廿乡嘛*承骸丑E&汗K府, 呻胡刖瞬M冷海浦涔邕 潴浙雁露书韩仍溥1斓 11 f 制 呼WMW斓3WSG地莹命II浮
18、砰潘昴 应供艮3日嫌 滩3MMN-a S徭评潜篇济剖斓3 3即间滞接口等相关资源的对接.222可视化平台可视化平台,利用物联网和大数据计算平台,基于先进的可视化技术和硬件设备,接入各部门图象、传感测量、定位等数据,充分整 合业务运行管理数据、挖掘数据资源,将各项关键故据以地理信息平台进行直观展示,支撑用户的监测、评估、决策、科普等用途、 构建智慧、开放和人性化的借息化应用体系。可视化综合展示分析系统面向城市智慧管理中心,对接城管、旅游、 政务、物联网、环保、水利、公安部门等部门现有业 务系统,合定制化 二/三维城市本地GIS地理信息系统,实现城市运行中的各类基础信息和 管理专题信息的综合态势与
19、数据展示。针对大运套等大型赛事和重大活动 场景可大屏重点展示,灾中支撑保障工作;针对重点区域,结合GIS重点 关注此区域的 地理位置、交通、视频等内容;针对突发事件,实时展示事 件趋势影响、周围资源配备等,实现统一调度和联动指挥;针对日常场 景,对城市运行体征进行综合展示“平台系统设计方面基于用户提供的各项基础数据,通过兰动提交或者被动采集将数据传输到数据服务平台,通过数据服务对数据进行数据的转换、清洗及规则化,转换成统计结果数据,将 该结果 数据通过主数据管理平台推送至可视化渲染系统进行可视化谊染;地理数 据导入到地图服务平台,地理数据通过转换校正后推送到可视化渲染系统 进行渲染;可视化渲染
20、系统金追化过的业务数据和地理数据结合进行渲染,并将渲染靖果通过大展拼控设备输 出到终愤显示设备上迸行可视化呈现。数据加载、文件落地双加载、内存不蒋地加载.对于不同的数据库加载、不同的方式加载,在数据加载过程 的工作 原理基本相同,数据加载能力包含:1 .默认情况下提供基础通用的加载控件,支持将数据源加熬到不同 的数据库中加载的数据支持接口、文件加载策略或者流式策略。2 .加载方式支持全量或者实时方式、全量加载方式则采用落地加栽策略,并旦需要结合运用不同平台的加载工具;实时加载与实时采集必须配套使用,二者之间共享内存实现同步数据交换,通过弓【入插件机制来屏敝不同数据源差异性。3 .支持加载时事物
21、提交的会数配置,允许设定数据文件相关输入路 径与加载文件匹配规则等信息,由数据装载完成发现文件、文件获取、加载数据、数据校验等操乍宛程后完成数据入库操作。4 .在加载实现过程中支持提供SQL、HQk SHELL等不同类别的行 为定义脚本,数据加载执行组件将根据定义行为脚本类型调起相应的脚本执行来加载到数据。5 .数据加载结束或者失败时,都需要记录操作日志,为后续效据藉 核与问题排查提供详细信息。6 .在加载触发模式上支持自动加载与手工执行的二大类型。支持数据自动加载的设计与执行,当数据加载出错时,应提供操作界面以人工干预的方式来重瞒动数据的接收和加载。数糖对接实现与市数据汇聚共享平台的数据资源
22、对接包括:数据、2.221系统架构设计圉4:邨化平白衲谖计系统基于用户提供的各项基础数据 如城市基础统计数据、经济数据、医疗数据、民生数据、教育数据、网格数据、视领监控数据等,结合地理 借息数据,以及主要区域三维城市建造逐模 数据。通过数据服务平台对数据进行二次处理转换为可视化渲染平台中可 视化框架的标准输入,再将标准数据格式存储成薮据文件。文件优势在于 灵便便于存储、转发,如果采用数据文件的方式,可以通过回放数据发包 器摹拟实时敬据的发送,通过二次处理转换为可视化框架的标准输入,推送到程序中。可视化渲染平台中可视化框架的数据接收模块收到标准数g逐寸VCS 平行阿洛数据同步方式进行同步,将空间
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 智慧 城市 运营 中心 建设 方案 实践
![提示](https://www.taowenge.com/images/bang_tan.gif)
限制150内