欢迎来到淘文阁 - 分享文档赚钱的网站! | 帮助中心 好文档才是您的得力助手!
淘文阁 - 分享文档赚钱的网站
全部分类
  • 研究报告>
  • 管理文献>
  • 标准材料>
  • 技术资料>
  • 教育专区>
  • 应用文书>
  • 生活休闲>
  • 考试试题>
  • pptx模板>
  • 工商注册>
  • 期刊短文>
  • 图片设计>
  • ImageVerifierCode 换一换

    深入浅出数据治理(DOC46)16879.doc

    • 资源ID:63111870       资源大小:1,001.50KB        全文页数:52页
    • 资源格式: DOC        下载积分:30金币
    快捷下载 游客一键下载
    会员登录下载
    微信登录下载
    三方登录下载: 微信开放平台登录   QQ登录  
    二维码
    微信扫一扫登录
    下载资源需要30金币
    邮箱/手机:
    温馨提示:
    快捷下载时,用户名和密码都是您填写的邮箱或者手机号,方便查询和重复下载(系统自动生成)。
    如填写123,账号就是123,密码也是123。
    支付方式: 支付宝    微信支付   
    验证码:   换一换

     
    账号:
    密码:
    验证码:   换一换
      忘记密码?
        
    友情提示
    2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。
    3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。
    4、本站资源下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。
    5、试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓。

    深入浅出数据治理(DOC46)16879.doc

    Evaluation Warning: The document was created with Spire.Doc for .NET.深入浅出数数据治理理目 录一数据管管理的现现状3二数据治治理的概概述4(一)数数据治理理概念4(二)数数据治理理目标5三数据治治理体系系5四数据治治理核心心领域6(一)数数据模型型6(二)数数据生命命周期6(三)数数据标准准8(四)主主数据9(五)数数据质量量10(六)数数据服务务12(七)数数据安全全12五数据治治理保障障机制13(一)制制度章程程13(1)规规章制度度13(2)管管控办法法13(3)考考核机制制13(二)数数据治理理组织15(1)组组织架构构15(2)组组织层次次16(3)组组织职责责17(三)流流程管理理19(四)IIT技术术应用19(1)支支撑平台台19(2)技技术规范范22附件A 数据管管理规范范23附件B 数数据质量量评估办办法38附件C 数数据质量量管理流流程42关于数据治治理的理解1. 数据管理的的现状根据行业信信息化发发展的现现状,结结合当今今行业数数据治理理的要求求,大型型集团或或政务管管理部门门现阶段段数据管管理方面面存在以以下的不不足:(1) 数数据多头头管理,缺缺少专门门对数据据管理进进行监督督和控制制的组织织。信息息系统的的建设和和管理职职能分散散在各部部门,致致使数据据管理的的职责分分散,权权责不明明确。组组织机构构各部门门关注数数据的角角度不一一样,缺缺少一个个组织从从全局的的视角对对数据进进行管理理,导致致无法建建立统一一的数据据管理规规程、标标准等,相相应的数数据管理理监督措措施无法法得到落落实。组组织机构构的数据据考核体体系也尚尚未建立立,无法法保障数数据管理理标准和和规程的的有效执执行。(2) 多多系统分分散建设设,没有有规范统统一的省省级数据据标准和和数据模模型。组组织机构构为应对对迅速变变化的市市场和社社会需求求,逐步步建立了了各自的的信息系系统,各各部门站站在各自自的立场场生产、使使用和管管理数据据,使得得数据分分散在不不同的部部门和信信息系统统中,缺缺乏统一一的数据据规划、可可信的数数据来源源和数据据标准,导导致数据据不规范范、不一一致、冗冗余、无无法共享享等问题题出现,组组织机构构各部门门对数据据的理解解难以应应用一致致的语言言来描述述,导致致理解不不一致。 (3) 缺缺少统一一的主数数据,组组织机构构核心系系统间的的人员等等主要信信息并不不是存储储在一个个独立的的系统中中,或者者不是通通过统一一的业务务管理流流程在系系统间维维护。缺缺乏对集集团公司司或政务务单位主主数据的的管理,就就无法保保障主数数据在整整个业务务范围内内保持一一致、完完整和可可控,导导致业务务数据正正确性无无法得到到保障。 (4) 缺缺乏统一一的集团团型数据据质量管管理流程程体系。当当前现状状中数据据质量管管理主要要由各组组织部门门分头进进行;跨跨局跨部部门的数数据质量量沟通机机制不完完善;缺缺乏清晰晰的跨局局跨部门门的数据据质量管管控规范范与标准准,数据据分析随随机性强强,存在在业务需需求不清清的现象象,影响响数据质质量;数数据的自自动采集集尚未全全面实现现,处理理过程存存在人为为干预问问题,很很多部门门存在数数据质量量管理人人员不足足、知识识与经验验不够、监监管方式式不全面面等问题题;缺乏乏完善的的数据质质量管控控流程和和系统支支撑能力力。 (5) 数数据全生生命周期期管理不不完整。目目前,大大型集团团或政务务单位,数数据的产产生、使使用、维维护、备备份到过过时被销销毁的数数据生命命周期管管理规范范和流程程还不完完善,不不能确定定过期和和无效数数据的识识别条件件,且非非结构化化数据未未纳入数数据生命命周期的的管理范范畴;无无信息化化工具支支撑数据据生命周周期状态态的查询询,未有有效利用用元数据据管理。2. 数据治理的的概述2.1 数据治理概概念数据治理是是指将数数据作为为组织资资产而展展开的一一系列的的具体化化工作,是对数数据的全全生命周周期管理理。数据治理体体系是指指从组织织架构、管管理制度度、操作作规范、IT应用技技术、绩绩效考核核支持等等多个维维度对组组织的数数据模型型、数据据架构、数数据质量量、数据据安全、数数据生命命周期等等各方面面进行全全面的梳梳理、建建设以及及持续改改进的体体系。2.2 数据治理目目标数据治理的的目标是是提高数数据的质质量(准准确性和和完整性性),保保证数据据的安全全性(保保密性、完完整性及及可用性性),实实现数据据资源在在各组织织机构部部门的共共享;推推进信息息资源的的整合、对对接和共共享,从从而提升升集团公公司或政政务单位位信息化化水平,充充分发挥挥信息化化作用。3. 数据治理体体系数据治理体体系包含含两个方方面,一一是数据据质量核核心领域域,二是是数据质质量保障障机制。具体两者内内容及相相互关系系可以参参见下图图:4. 数据治理核核心领域域为了有效管管理信息息资源,必必须构集集团级数数据治理理体系。数数据治理理体系包包含数据据治理组组织、数数据构架架管理、主主数据管管理、数数据质量量管理、数数据服务务管理及及数据安安全管理理内容,这这些内容容既有机机结合,又又相互支支撑。4.1 数据模型数据模型是是数据构构架中重重要一部部分,包包括概念念数据模模型和逻逻辑数据据模型,是是数据治治理的关关键、重重点。理理想的数数据模型型应该具具有非冗冗余、稳稳定、一一致、易易用等特特征。逻逻辑数据据模型能能涵盖整整个集团团的业务务范围,以以一种清清晰的表表达方式式记录跟跟踪集团团单位的的重要数数据元素素及其变变动,并并利用它它们之间间各种可可能的限限制条件件和关系系来表达达重要的的业务规规则。数数据模型型必须在在设计过过程中保保持统一一的业务务定义。为为了满足足将来不不同的应应用分析析需要,逻逻辑数据据模型的的设计应应该能够够支持最最小粒度度的详细细数据的的存储,以以支持各各种可能能的分析析查询。同同时保障障逻辑数数据模型型能够最最大程度度上减少少冗余,并并保障结结构具有有足够的的灵活性性和扩展展性4.2 数据生命周周期一般包括数数据生成成及传输输、数据据存储、数数据处理理及应用用、数据据销毁四四个方面面。(1)数据据生成及及传输数据应该能能够按照照数据质质量标准准和发展展需要产产生,应应采取措措施保证证数据的的准确性性和完整整性,业业务系统统上线前前应该进进行必要要的安全全测试,以以保证上上述措施施的有效效性。对对于手工工流程中中产生的的数据在在相关制制度中明明确要求求,并通通过事中中复核、事事后检查查等手段段保证其其准确性性和完整整性。数数据传输输过程中中需要考考虑保密密性和完完整性的的问题,对对不同种种类的数数据分别别采取不不同的措措施防止止数据泄泄漏或数数据被篡篡改。(2)数据据存储这个阶段除除了关注注保密性性、完整整性之外外,更要要关心数数据的可可用性,对对于大部部分数据据应采取取分级存存储的方方式,不不仅存储储在本地地磁盘上上,还应应该在磁磁带上,甚甚至远程程复制到到磁盘阵阵列中,或或者采用用光盘库库进行存存储。对对于存储储备份的的数据要要定期进进行测试试,确保保其可访访问其数数据完整整。数据据的备份份恢复策策略应该该由数据据的责任任部门或或责任人人负责制制定,信信息化管管理部门门可以给给予相应应的支持持。同时时还需要要注意因因为部门门需要或或故障处处理的需需要,可可能对数数据进行行修改,必必须在数数据管理理办法中中明确数数据修改改的申请请审批流流程,审审慎对待待后台数数据修改改。(3)数据据处理和和应用信息化相关关部门需需要对数数据进行行分析处处理,以以挖掘出出对于管管理及业业务开展展有价值值的信息息,为保保证过程程中数据据的安全全性,一一般应采采用联机机处理,系系统只输输出分析析处理的的结果。但但是实际际中,因因为相关关数据分分析系统统建设不不到位,需需要从数数据库中中提取数数据后再再对数据据进行必必要的分分析处理理,在这这个过程程中就需需要关注注数据提提取操作作是否可可能对数数据库造造成破坏坏、提取取出的数数据在交交付给分分析处理理人员的的过程中中其安全全性是否否会降低低、数据据分析处处理的环环境安全全性等等等。(4)数据据销毁这个阶段主主要涉及及数据的的保密性性。应明明确数据据销毁的的流程,采采用必要要的工具具,数据据的销毁毁应该有有完整的的记录。尤尤其是对对于需要要送出外外部修理理的存储储设备,送送修之前前应该对对数据进进行可靠靠的销毁毁。4.3 数据标准数据标准是是集团单单位建立立的一套套符合自自身实际际,涵盖盖定义、操操作、应应用多层层次数据据的标准准化体系系。数据标准的的建立是是集团单单位信息息化、数数字化建建设的一一项重要要工作,行行业的各各类数据据必须遵遵循一个个统一的的标准进进行组织织,才能能构成一一个可流流通、可可共享的的信息平平台。数据治理对对标准的的需求可可以划分分为两类类,即基基础性标标准和应应用性标标准。前前者主要要用于在在不同系系统间,形形成信息息的一致致理解和和统一的的坐标参参照系统统,是信信息汇集集、交换换以及应应用的基基础,包包括数据据分类与与编码、数数据字典典、数字字地图标标准;后后者是为为平台功功能发挥挥所涉及及的各个个环节,提提供一定定的标准准规范,以以保证信信息的高高效汇集集和交换换,包括括元数据据标准、数数据交换换技术规规范、数数据传输输协议、数数据质量量标准等等。(1)数据据分类与与编码数据分类与与编码标标准是信信息化建建设中标标准化的的一项基基础工作作,该类类标准规规定平台台汇集、交交换相关关信息统统一的分分类系统统和排列列顺序以以及编码码规则,目目的是在在不同系系统和用用户之间间建立交交通数据据的一致致参照,对对提高数数据采集集、处理理和数据据交换效效率具有有重要作作用。数数据分类类与编码码标准的的制定将将有力推推进平台台标准化化及交通通信息化化建设标标准化的的进程。(2)数据据字典针对实际需需求,定定义数据据集,建建立各个个领域的的数据字字典,规规范数据据概念和和数据定定义。在在此基础础上,形形成完备备的集团团单位数数据集和和数据字字典。(3)元数数据标准准元数据标准准是描述述数据资资源的具具体对象象时所有有规则的的集合,它它包括了了完整描描述一个个具体数数据对象象时所需需要的数数据项集集合。针针对各种种信息资资源分别别制定适适当的元元数据标标准,可可为信息息的管理理、发现现和获取取提供一一种实际际而简便便的方法法,从而而提高数数据交换换效率。 (4)数据据交换标标准为了保证数数据共享享和交换换的顺利利实现,必必须明确确定义和和规范数数据交换换的相关关标准。数数据交换换的标准准规范是是集团单单位综合合信息平平台的核核心标准准。其中中应当包包括数据据交换内内容、数数据交换换格式、数数据传输输方式、各各类中心心间数据据接口的的标准化化等方面面。 (5)数据据质量标标准由于数据采采集任务务通常由由其他二二级平台台完成,数数据治理理平台的的标准方方法主要要集中在在数据的的加工和和管理上上。应该该重点开开发的一一个领域域是数据据质量控控制方法法。应当当从三个个方面对对数据质质量方法法进行研研究:“ 坏数据”或“不可靠靠数据”的识别别,错误误数据的的编辑方方法,以以及缺少少值的处处理。4.4 主数据主数据管理理要做的的就是从从各部门门的多个个业务系系统中整整合最核核心的、最最需要共共享的数数据(主主数据),集集中进行行数据的的清洗和和丰富,并并且以服服务的方方式把统统一的、完完整的、准准确的、具具有权威威性的主主数据传传送给集团单单位范围围内需要要使用这这些数据据的操作作型应用用系统和分分析型应应用系统统。主数据管理理的信息息流应为:1) 某个个业务系系统触发发对主数数据的改改动;2) 主数数据管理理系统将将整合之之后完整整、准确确的主数数据传送送给所有有有关的的应用系系统3) 主数数据管理理系统为为决策支支持和数数据仓库库系统提提供准确确的数据据源。因此对于主主数据管管理要考考虑运用用主数据据管理系系统实现现,主数数据管理理系统的的建设,要要从建设设初期就就考虑整整体的平平台框架架和技术术实现。4.5 数据质量数据质量不不高将影影响数据据仓库应应用程度度不高。低低下的数数据质量量往往造造成开发发出来的的系统与与用户的的预期大大相径庭庭,数据据质量关关系建设设有关分分析型信信息系统统成败,同同时数据据资源是是集团单单位的战战略资源源,合理理有效的的使用正正确的数数据能指指导集团团单位做做出正确确的决策策,提高高省综合合竞争力力。不合合理的使使用不正正确的数数据(即即差的数数据质量量)可导导致决策策的失败败,正可可谓差之之毫厘、谬谬以千里里。数据质量管管理包含含对数据据的绝对对质量管管理、过过程质量量管理。绝绝对质量量即数据据的真实实性、完完备性、自自治性是是数据本本身应具具有的属属性。过过程质量量即使用用质量、存存储质量量和传输输质量,数数据的使使用质量量是指数数据被正正确的使使用。再再正确的的数据,如如果被错错误的使使用,就就不可能能得出正正确的结结论。数数据的存存贮质量量指数据据被安全全的存贮贮在适当当的介质质上。所所谓存贮贮在适当当的介质质上是指指当需要要数据的的时候能能及时方方便的取取出。数数据的传传输质量量是指数数据在传传输过程程中的效效率和正正确性。高质量的交交通运输输行业数数据至少少有如下下几项要要求:一是正确性性,在转转换、分分析、存存储、传传输、应应用流程程中不存存在错误误;二是完整性性,数据据库应用用或要求求的所有有记录、字字段都存存在;三是一致性性,体现现在整个个数据库库的定义义和维护护方面,确确保数据据在使用用的整个个过程中中是一致致的;四是时效性性,衡量量指标是是在指定定的数据据与真实实的业务务情况同同步的时时间容忍忍度内,即即指定的的更新频频度内,及及时被刷刷新的数数据的百百分比;五是可靠性性,提供供数据的的数据源源必须能能够可靠靠稳定地地提供数数据。数据质量管管理的规规划和实实施包括括以下内内容:一是数据质质量管控控体系的的建立,包包括数据据质量的的评估体体系,定定期评估估数据质质量状况况;二是在部门门各个应应用系统统中的落落实,包包括每个个应用系系统中的的数据质质量检查查等;三是在最开开始建立立数据质质量管理理系统的的时候,借借助数据据治理平平台上,通通过建立立数据质质量管理理的规则则来集中中化地建建立数据据质量管管理系统统,发现现问题并并持续改改进; 四是数据质质量管理理与业务务稽核的的结合,通通过业务务规则的的稽核来来发现数数据质量量深层次次的问题题,将数数据质量量与业务务一线结结合起来来,使业业务人员员对数据据质量问问题有更更加清晰晰和明确确的认识识。完善的数据据质量管管理是保保障各项项数据治治理工作作能够得得到有效效落实,达达到数据据准确、完完整的目目标,并并能够提提供有效效的增值值服务的的重要基基础。4.6 数据服务数据整理最最终目的的就是要要服务于于各部门门单位、人人员等,能能更准确确更快更更方便的的服务是是数据服服务管理理的目标标。数据服务管管理是指指针对内内部积累累多年的的数据,研研究如何何能够充充分利用用这些数数据,分分析行业业业务流流程优化化业务流流程。数数据使用用的方式式通常包包括对数数据的深深度加工工和分析析,包括括通过各各种报表表、工具具来分析析运营层层面的问问题,还还包括通通过数据据挖掘等等工具对对数据进进行深度度加工,从从而更好好的管理理者服务务。通过过建立统统一的数数据服务务平台来来满足针针对跨部部门、跨跨系统的的数据应应用。通通过统一一的数据据服务平平台来统统一数据据源,变变多源为为单源,加加快数据据流转速速度,提提升数据据服务的的效率。4.7 数据安全由于集团单单位的重重要且敏敏感信息息大部分分集中在在应用系系统中,数数据安全全更是至至关重要要。如何何保障数数据不被被泄露和和非法访访问,是是非常关关键的问问题。数数据安全全管理主主要解决决的就是是数据在在保存、使使用和交交换过程程中的安安全问题题。数据安全管管理主要要体现在在以下六六个方面面:一是数据使使用的安安全性,包包括基础础数据的的保存、访访问和权权限管理理;二是数据隐隐私问题题,系统统中采集集的证件件号码、银银行账号号等信息息在下游游分析系系统和内内部管理理系统中中,是否否要进行行加密,以以避免数数据被非非法访问问;三是访问权权限统一一管理,包包括单点点登录问问题及用用户名、数数据和应应用的访访问授权权统一管管理;四是数据安安全审计计,为数数据修改改、使用用等环节节设置审审计方法法,事后后进行审审计和责责任追究究;五是制度及及流程建建立,逐逐步建立立数据安安全性的的管理办办法、系系统开发发规范、数数据隐私私管理办办法及相相应的应应用系统统规范、在在管理决决策和分分析类系系统中的的审计管管理办法法等;六是应用系系统权限限的访问问控制,建建立集团团级权限限管理系系统,增增加数字字水印等等技术在在应用系系统中的的使用。5. 数据治理保保障机制制5.1 制度章程5.1.1 规章制度数据治理章章程类似似于企业业的公司司条例。该该章程阐阐明数据据治理的的主要目目标、相相关工作作人员、职职责、决决策权利利和度量量标准。具体可参见见 附件 数据管管理规范范5.1.2 管控办法管控办法是是基于规规章制度度与工具具的结合合,可落落地的操操作的办办法。具体可参见见 附件 数据质质量评估估办法5.1.3 考核机制考核是是保保障制度度落实的的根本,建建立明确确的考核核制度,实实际操作作中可根根据集团团单位情情况,建建立相应应的针对对数据治治理方面面的考核核办法,并并与个人人绩效相相关联。可可参考管管理学中中相关考考核、绩绩效管理理相关部部分。对于数据治治理的考考核,可可见下图图进行理理解:5.2 数据治理组组织5.2.1 组织架构有效的组织织机构是是项目成成功的有有力保证证,为了了达到项项目预期期目标,在在项目开开始之前前对于组组织机构构及其责责任分工工做出规规划是非非常必要要的,数数据治理理项目管管理组织织建议宜宜采用如如图所示示的组织织结构:5.2.2 组织层次数据治理委委员会由由集团公公司的高高层领导导者组成成。委员员会定义义数据治治理愿景景和目标标;组织织内跨业业务部门门和 IT部门进进行协调调;设置置数据治治理计划划的总体体方向;在发生生策略分分歧时进进行协调调。此委委员会也也将包含含来自部部门或子子公司的的领导代代表,以以及来自自各单位位视数据据为机构构资产的的信息科科技部门门的代表表。这些些高层管管理人员员是数据据治理计计划的所所有拥护护者,确确保在整整个组织织内获得得支持。数据治理工工作组是是组织内内委员会会下面的的下一个个级别。工工作组执执行数据据治理计计划。工工作组负负责监督督数据管管理员工工作。数数据治理理工作组组由数据据治理委委员会中中各局领领导主持持。每各业务部部门有至至少一位位业务分分析员,信信息科技技部门设设置数据据质量分分析员、数数据管理理员、集集成开发发人员。各各工作人人员负责责本部门门数据的的质量,履履行职责责,解决决具体的的问题。5.2.3 组织职责根据数据管管理工作作的实际际需要,在在业务管管理部门门、技术术管理部部门和业业务应用用部门确确定各工工作人员员的职责责。数据治理委委员会的的职责范范围:1)从战略略角度来来统筹和和规划,对对数据资资产和系系统进行行清理,确确定数据据治理的的范围;明确数数据源的的出处、使使用和管管理的流流程及职职责;2)明确数数据治理理的组织织、功能能、角色色和职责责;3)负责各各工作组组成员的的培训工工作;4)负责审审查各工工作小组组的目标标、原则则,批准准数据管管理的相相关制度度、标准准及流程程;5)负责确确定数据据治理的的工具、技技术和平平台;6)负责制制定数据据治理的的评估指指标、方方法。数据治理工工作小组组,其主主要工作作职责是是:负责数据治治理的牵牵头,组组织、指指导和协协调本单单位的数数据治理理工作;综合数据治治理管控控办法、数数据治理理考核机机制等有有关规章章制度的的牵头制制定、修修改等;负责数据的的分析整整理并出出具数据据指标报报告;负责数据的的监测预预测工作作;建立数据冲冲突的处处理流程程和数据据变更控控制流程程。负责对基础础数据质质量的检检测、发发布、考考核和清清理完善善工作。工作组成员员:业务务分析员员、数据据质量分分析员、数数据管理理员、集集成开发发员这些不同的的角色在在数据治治理过程程中承担担着彼此此不同,而而又相辅辅相成的的职责。其其中集成成开发人人员在数数据治理理流程中中需要肩肩负起数数据访问问、验证证数据结结构、验验证数据据、交付付数据以以及数据据库/知识库库的构建建等角色色,因此此他们的的工作包包括:Ø 访问及交付付相应数数据给业业务用户户Ø 提高生产力力和性能能Ø 最大化减少少异常/出错的的影响 Ø 开发和完善善技术最最佳实践践数据质量分分析员在在数据治治理流程程中负责责数据的的剖析、清清洗匹配配合并等等。工作作包括:Ø 为开发人员员定义数数据规格格及标准准 Ø 为机构有效效的追踪踪数据质质量问题题Ø 实施被业务务人员和和数据管管理员定定义正确确的数据据质量规规则Ø 不间断的监监控数据据质量水水平及问问题业务分析人人员在数数据治理理流程中中负责定定义数据据的转换换规则,工工作包括括:Ø 与需求开发发人员协协作,正正确捕获获和解析析业务需需求 Ø 与开发人员员和数据据管理员员协作,为为业务用用户缩短短数据产产生价值值的时间间数据管理员员需要定定义引证证数据,并并管理元元数据,工工作包括括:Ø 保证数据的的质量、正正确、完完整、一一致、审审计及安安全性Ø 定义引证/参考 数据Ø 为组织机构构数据实实体给出出正确业业务定义义Ø 为组织机构构解决混混淆和有有争论的的数据定定义5.3 流程管理流程管理包包括流程程目标、流流程任务务、流程程分级,根根据数据据治理的的内容,建建立相应应流程,且且遵循本本单位数数据治理理的规则则制度。实实际操作作中可结结合所使使用的数数据治理理工具,与与数据治治理工具具供应商商进行协协商,建建立符合合集团公公司的流流程管理理。5.4 IT技术应应用5.4.1 支撑平台现市场上关关于数据据治理平平台存在在不同的的成熟产产品,但但在功能能实现上上大致相相同,具具体可参参加下图图了解。5.4.2 技术规范技术规范是是保障数数据治理理平台可可持续管管理的基基础,随随着数据据量的增增长、技技术水平平的发展展,为更更好、可可持续的的实现数数据资产产的管理理、应用用,需建建立明确确的技术术规范。附件A 数据管管理规范范为逐步提高高数据资资源利用用效果,推推动信息息化建设设管理向向标准化化、信息息化和数数字化方方向发展展,数据据管理应应遵循以以下原则则: (1)统一一规范。数数据标准准要严格格执行省省交通运运输厅的的统一标标准。(2)分级级管理。实实行分层层级的数数据管理理模式,明明确职责责分工,层层层落实实责任。(3)过程程控制。建建立数据据从采集集、报送送、审核核到应用用、维护护全过程程的控制制规范,保保证数据据质量,提提高应用用效果。(4)保障障安全。建建立数据据访问的的身份验验证、权权限管理理及定期期备份等等安全制制度,规规范操作作,做好好病毒预预防、入入侵检测测和数据据保密工工作。(5)数据据共享。整整合应用用系统,做做到入口口唯一,实实现数据据一次采采集,集集中存储储,共享享使用。数据管理的的规范工工作包括括:数据据标准、数数据采集集、数据据审核、数数据维护护、数据据分析、数数据应用用、数据据发布、数数据传输输、数据据存储(备备份、恢恢复)、数数据安全全管理、数数据质量量监控、数数据管理理考核等等。(一)数据据标准第一条 安安徽省交交通运输输行业数数据必须须按国家家交通部部制定的的数据标标准和代代码规范范执行。国国家交通通部标准准中未包包括的内内容执行行安徽省省交通运运输厅的的统一规规范。第二条 在在数据采采集工作作中,各各级应严严格依据据省局制制定的标标准进行行数据的的采集录录入、审审核修正正、数据据质量监监控和管管理考核核,确保保数据质质量。第三条 数数据指标标的设定定和修改改必须严严格执行行软件的的管理规规定和程程序。凡凡使用省省局统一一软件的的,市局局对有关关数据指指标无权权制定和和修改,必必须执行行全省统统一规范范。使用用非省局局统一软软件的,市市局业务务管理部部门应根根据工作作需要和和所管软软件的需需求变化化,及时时提出设设定(修修改)数数据指标标的具体体内容、质质量标准准和时间间要求,并并明确数数据录入入部门、录录入岗位位和录入入时限,报报分管领领导批准准后提交交安徽省省交通运运输联网网运行管管理中心心。安徽徽省交通通运输联联网运行行管理中中心应根根据业务务管理部部门的需需求,及及时制定定(修改改)数据据采集的的技术规规范,包包括数据据采集格格式、权权限设定定和方法法步骤等等,并按按时向业业务管理理部门通通报所采采集数据据的指标标内容变变化情况况,以便便业务部部门根据据采集到到的指标标提出数数据加工工需求。第四条 数数据指标标的确定定应以有有效实用用和优化化服务为为目标,不不断提高高数据集集中度和和信息共共享度,科科学归并并各项业业务的同同类、同同属性指指标,避避免业务务部门重重复上报报数据。(二) 数数据采集集第一条 数数据采集集重点是是原始数数据的采采集,原原始数据据主要包包括业务务部门通通过纸质质资料报报送的数数据,通通过电子子传输报报送的数数据(含含电磁介介质报送送的数据据和网络络传输报报送的数数据,下下同);相关部部门通过过纸质、电电子传输输提供的的数据;管理业业务处理理结果(检检查、调调查、核核实、认认定、审审批等)产产生的数数据。第二条 数数据采集集主要依依靠应用用系统进进行录入入(导入入),现现用应用用系统不不能满足足数据采采集需要要的,通通过相关关系统的的补录模模块进行行数据录录入(导导入)。第三条 数数据采集集方式分分为手工工采集、数数据电文文导入和和光学字字符识别别(OCR)、图图形扫描描等其他他方式。为保障数据据采集的的质量,提提高数据据采集的的效率,应应充分应应用信息息化技术术,最大大限度地地减少手手工录入入。第四条 为为提高数数据录入入质量,各各市交通通部门有有关单位位要认真真执行资资料数据据的核对对制度,严严格以原原始资料料为依据据,确保保录入数数据的一一致性和和准确性性。数据据采集录录入前,操操作人员员应先将将准备录录入的原原始资料料或有关关表证单单书进行行完整性性、逻辑辑性、真真实性审审核,发发现漏填填、错填填和逻辑辑关系不不符的,应应于做出出修正或或补正; 第五条 对对通过电电子传输输方式报报送数据据的,数数据必须须通过接接收软件件相应设设置的完完整性、逻逻辑性审审核。第六条 各各级各单单位应建建立纸质质数据和和电子数数据的核核对制度度,明确确职责分分工和工工作程序序,落实实岗位责责任,发发现问题题及时处处理。第七条 对对于交通通部、省省厅没有有规定的的数据采采集标准准规范,各各局市交交通部门门及信息息化责任任部门应应根据不不同的数数据采集集岗位和和软件覆覆盖面,细细化工作作职责,量量化作业业标准,结结合业务务操作规规程,建建立统一一的数据据采集录录入操作作规范和和管理制制度。数数据采集集规范应应包括数数据来源源、采集集时间、操操作岗位位、操作作步骤、操操作内容容和采集集内容的的逻辑校校验等要要素。第八条 各各级数据据采集人人员应强强化数据据质量意意识, 熟练掌掌握正确确的采集集和审核核方法,按按照部门门职责分分工,严严格按照照相关操操作规范范采集各各类数据据。第九条 任任何人不不准擅自自委托他他人以本本人用户户名录入入数据。确确因工作作需要委委托他人人以自己己名义录录入的,必必须报经经主管领领导批准准,并及及时更改改口令。第十条 安安徽省交交通运输输联网运运行管理理中心应应简化、归归并各级级地单位位报送的的报表,统统一采集集,集中中处理,自自动生成成,分别别使用,提提高工作作效率和和质量,减减轻各级级单位的的工作量量。(三)数据据审核第一条 数数据审核核是确保保数据质质量的重重要环节节。审核核的重点点是数据据的及时时性、完完整性、真真实性、准准确性和和规范性性。(1)及时时性是指指数据要要在规定定的时间间内采集集,确保保应用系系统数据据与实际际交通信信息业务务同步;(2)完整整性是指指数据采采集应按按照有关关规定及及相应表表、证、单单、书采采集的要要求进行行,不得得缺表或或漏项,杜杜绝数据据的机外外操作和和循环;(3)真实实性是指指数据采采集要如如实反映映交通行行业管理理实际,以以合法、真真实的原原始资料料为依据据,不得得随意捏捏造;(4)准确确性是指指数据采采集应准准确反映映交通行行业管理理实际,与与纸质资资料数据据一致,数数据之间间逻辑相相符,不不得出现现运算错错误或逻逻辑错误误;(5)规范范性是指指数据采采集应按按照统一一的业务务标准及及技术规规范进行行。第二条 各各市交通通部门及及相关岗岗位人员员按照自自身工作作职责范范围,负负责相关关数据的的日常审审核。第三条 为为加强数数据质量量管理,省省厅建立立数据审审核制度度,数据据管理员员定期或或不定期期对已采采集数据据进行审审核。对对审核中中发现的的数据质质量问题题应及时时反馈至至具体的的原始数数据采集集岗,限限期补录录修正。第四条 各各级可采采取人工工抽样、数数据软件件检测等等方式进进行数据据审核。对对检索出出不符合合标准的的数据,反反馈至原原数据采采集岗进进行补录录修正。在在数据应应用环节节发现的的数据采采集差错错,应通通过相关关业务管管理部门门的数据据管理员员进行审审核确认认,然后后反馈至至原数据据采集岗岗进行变变更修正正。第五条 审审核中发发现的差差错应及及时通知知相关部部门。第六条 数数据审核核岗人员员与数据据采集岗岗人员对对数据问问题有异异议的,由由上级业业务主管管部门负负责对争争议事项项做出裁裁定。第七条对对各级数数据审核核发现的的问题数数据基层层分局已已无权限限修正的的,严格格按照数数据维护护规定的的程序开开展修正正工作,任任何人不不得擅自自修改。(四) 数数据维护护第一条 数数据维护护包括对对数据中中错误数数据的修修正、不不完整数数据的补补充、垃垃圾数据据的清理理及历史史数据的的迁移等等。第二条 各各市交通通业务管管理部门门应结合合各应用用系统制制定详细细的数据据维护工工作制度度,明确确数据维维护的权权限、职职责,严严格按照照工作制制度进行行数据维维护。已已经进入入应用系系统的数数据,不不得擅自自修改、删删除。第三条 对对错误数数据的修修正和不不完整数数据的补补充,省省厅统一一按以下下程序处处理:(1)对尚尚未录入入应用系系统或已已录入尚尚保留修修改权限限的数据据,需修修改的,可可由前台台原数据据采集岗岗根据审审核意见见纠正后后重新录录入(或或直接纠纠正);(2)对已已录入应应用系统统的数据据,经审审核发现现错误,前前台原数数据采集集岗已无无权限修修改的,应应根据具具体业务务工作流流程和要要求实行行层级审审批修正正。第四条   对已录录入应用用系统需需层级审审批修正正的数据据,市级级信息部部门有权权限处理理的,应应由数据据修正申申请单位位及时提提出数据据修正申申请,报报数据所所属系统统的责任任业务管管理科室室审核审审批。市市信息管管理部门门同意修修正或在在接到同同意修正正的审批批后办理理。对经确认不不能予以以修正的的,有权权修正单单位应及及时向申申请单位位或相关关人员说说明原因因。第五条 对对需由省省数据中中心办理理的数据据修正事事项,应应由申请请单位及及时提出出数据修修正申请请,分别别报经区区市信息息管理部部门及责责任业务务管理科科室审批批。省级级数据中中心在接接到同意意修正的的申批后后办理。对经确认不不能予以以修正的的,有关关单位应应及时向向数据修修正申请请单位及及有关人人员说明明原因。第六条 对对不按规规定程序序上报审审批的数数据修正正申请,各各级数据据管理的的技术管管理部门门不予以以修改。第七条对对经查实实,属有有关单位位弄虚作作假、人人为调整整指标等等主观因因素造成成其无法法自行恢恢复的数数据错误误,各级级数据管管理的技技术管理理部门有有权不予予修正,并并向省交交通运输输单位报报告。第八条 各各级数据据管理的的技术管管理部门门应按照照系统初初始维护护设置和和上级部部门分配配的权限限实施数数据修正正业务。执执行过程程中如遇遇权限调调整,各各级数据据管理的的技术管管理部门门应在权权限变动动后十五五日内向向辖区内内本级和和下一级级业务部部门公告告通知。第九条 数数据维护护前应做做好相应应备份工工作。数数据维护护工作应应严格备备案,对对每项数数据维护护的内容容、时间间、维护护原因、责责任人等等进行详详细记录录,涉及及的书面面材料必必须登记记存档。第十条 应应用系统统因数据据平台转转换、系系统升级级等原因因需对历历史数据据转储、迁迁移的,由由信息技技术部门门会同业业务管理理部门确确定历史史数据的的处理方方法,保保证新旧旧数据的的衔接和和系统的的平稳过过渡。第十一条 各级信信息技术术部门应应加强对对数据的的监控,定定期检测测数据的的存储,分分析数据据的构成成,提出出数据清清理优化化的方案案,经业业务管理理部门确确认后,定定期进行行垃圾数数据的清清理。垃垃圾数据据主要指指过期的的、重复复的、没没有使用用价值的的数据,不不包括按按规定应应保留的的历史数数据。(五)数据据分析第一条 数数据分析析是采取取科学合合理的方方法,利利用现代代信息技技术手段段,对计计算机应应用系统统生成的的数据进进行分析析,充分分发掘数数据中蕴蕴涵的信信息,形形成有用用指标数数据值的的过程。第二条 数数据分析析一般按按照选题题分析应用反馈再选题题的方式式进行,积积极研究究、探索索科学实实用的分分析方法法,为交交通运输输工作服服务。同同时依据据数据应应用过程程中暴露露出的问问题,改改进数据据管理方方法和手手段,促促进数据据管理质质量不断断提高。第三条 数数据分析析分为固固定分析析和专项项分析两两种。固固定分析析指标在在一定时时期内相相对固定定,通过过编制应应用软件件自动生生成。专专项分析析的选题题指标根根据交通通运输管管理工作作的新形形势和新新问题需需要专门门设计,临临时从前前台或后后台抽取取相关数数据进行行分析处处理。第四条 各各级各单单位应充充分利用用数据资资源,规规范数据据分析程程序,积积极探索索数据获获取、加加

    注意事项

    本文(深入浅出数据治理(DOC46)16879.doc)为本站会员(you****now)主动上传,淘文阁 - 分享文档赚钱的网站仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知淘文阁 - 分享文档赚钱的网站(点击联系客服),我们立即给予删除!

    温馨提示:如果因为网速或其他原因下载失败请重新下载,重复下载不扣分。




    关于淘文阁 - 版权申诉 - 用户使用规则 - 积分规则 - 联系我们

    本站为文档C TO C交易模式,本站只提供存储空间、用户上传的文档直接被用户下载,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有。本站仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。若文档所含内容侵犯了您的版权或隐私,请立即通知淘文阁网,我们立即给予删除!客服QQ:136780468 微信:18945177775 电话:18904686070

    工信部备案号:黑ICP备15003705号 © 2020-2023 www.taowenge.com 淘文阁 

    收起
    展开