(5.8.1)--中国地方政府数据开放平台报告数据获取(2017上半年).pdf
《(5.8.1)--中国地方政府数据开放平台报告数据获取(2017上半年).pdf》由会员分享,可在线阅读,更多相关《(5.8.1)--中国地方政府数据开放平台报告数据获取(2017上半年).pdf(40页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、一、背景与趋势数据是国家的战略性资源,一个国家有大量基础性、关键性的数据掌握在各级各地政府部门手中。大数据建立在开放数据的基础上,政府部门在履行行政职责过程中制作、获取和保存了海量的数据资源,这些数据是整个社会的公共资源,应取之于民,还之于民,释放数据能量,创造社会价值。在保障国家秘密、商业秘密和个人隐私的前提下,将政府数据最大限度地开放给社会进行开发利用,将有利于加强政府透明度,激发创新活力,提高服务水平,转变经济发展方式,提升政府治理能力。近年来,开放政府数据已在全球范围内迅速推进。根据2016 联合国电子政务调查报告的数据,截止 2016 年,联合国 193 个成员国中已有 106 个提
2、供了开放数据目录。我国政府也高度重视开放政府数据。2015 年 8 月,国务院印发的促进大数据发展行动纲要要求稳步推动公共数据资源开放,加快建设国家政府数据统一开放平台。2017 年2 月,中央全面深化改革领导小组第三十二次会议审议通过了关于推进公共信息资源开放的若干意见,要求着力推进重点领域公共信息资源开放,释放经济价值和社会效应。2017 年 5 月,国务院办公厅又印发政务信息系统整合共享实施方案,明确要求“推动开放,加快公共数据开放网站建设”。2012 年以来,我国已有近二十个地方政府陆续推出数据开放平台,先行先试,积极探索,积累了许多经验,也仍然面临着许多挑战。我国各级城市是公众集中生
3、活的重要空间,城市数据具有高密度高价值的特点,开放城市政府数据有利于吸引社会各方基于城市的实际需求和应用场景对开放数据进行融合利用,创造社会经济价值,并形成正向反馈,进一步推动政府数据开放,构建起一个动态循环的开放数据生态系统。在此背景下,复旦大学与“提升政府治理能力大数据应用技术国家工程实验室”联合发布国内首个地方政府数据开放报告2017 中国地方政府数据开放平台报告。报告由复旦大学数字与移动治理实验室基于多年研究积累和数据监测分析制作完成。基于开放数据的原则与标准,借鉴多家国际性评估报告实践,立足我国政府数据开放的实际情况和发展阶段,报告构建起一个系统科学、多维度、可操作的评估框架,并基于
4、该框架对我国现有的地方政府开放数据平台进行综合评价,制作指数报告,提出优化建议。开放数据,蔚然成林。一棵棵开放“数木”的丛然并生、成荫如盖、直至叶茂花开,终将成长为一片繁盛多样、平衡稳定、循环持续的“开放数林”。中国地方政府数据开放平台报告将定期发布“开放数林指数”,持续追踪我国地方政府数据开放工作的推进与深入,精心测量“数木”们的粗细、密度、材质与价值,助力中国开放数据生态系统的形成与发展。1.背景与趋势Background02|032017 中国地方政府数据开放平台报告|数据获取二、评估方法2.1 定义、原则与标准2007 年 12 月,30 位开放数据倡导者聚集在美国加利福尼亚州,首次提
5、出了开放政府数据的 8 大基本原则:完整的、原始的、及时的、可公开获取的、可机器读取的、非歧视获取的、非专属的、免于授权许可的。会议还将“数据”定义为“一切以电子形式存储的记录”,并指出公共数据是指不涉及隐私、安全和其他特定限制的数据1。2016 联合国电子政务调查报告将开放政府数据定义为“主动在网上公开政府信息,使任何人都能不受限制地获取、再利用和再分发”2。根据世界银行的定义,开放数据是“能被任何人出于任何目的不受限制进行自由利用、再利用和分发,并最大程度保持原始出处和开放性的数据”。所谓“开放性”,应具备两个维度的特性:一为法律性开放,即这些数据必须被置于公共领域,或处于自由利用条款下,
6、受到最低程度的限制;二为技术性开放,即数据必须以机器可读的、最好是非专属的、电子格式发布,从而使任何人可使用通用的、免费的软件获取和利用这些数据,数据还应被放置于公共服务器上,可被公开获取,不受密码或防火墙的限制3。2015 年,国际开放数据宪章将开放数据界定为具备必要的技术和法律特性,从而能被任何人、在任何时间和地点进行自由利用、再利用和分发的电子数据。该宪章还提出六项原则:以开放为默认原则、及时和全面、可公开获取和可利用、可比较和互操作、致力于改善治理与公众参与、1 www.opengovdata.org2 https:/publicadministration.un.org/egovkb
7、/en-us/reports/un-e-government-survey-20163 http:/opendatatoolkit.worldbank.org/en/essentials.html致力于包容性发展和创新4。纽约大学政府实验室(Govlab)对国际上具有代表性的十一个研究机构、评估指标、政府部门和咨询公司界定的“开放数据”定义进行梳理后发现,最多被提及的开放数据标准包括免费、公开提供、非排他性、可利用结构、开放授权和可再利用等5。2017 年,国务院办公厅印发的政务信息系统整合共享实施方案指出要向社会开放“政府部门和公共企事业单位的原始性、可机器读取、可供社会化再利用的数据集”。
8、国家公共数据开放的有关要求也指出要保证开放数据的完整性、准确性、原始性、机器可读性、非歧视性、及时性,方便公众在线检索、获取和利用。本次评估根据以上定义、原则与标准,基于目前我国政府数据开放的实际情况和发展阶段,确定了报告的评估对象、指标体系、数据采集分析方法、以及指数计算方法。2.2评估范围报告根据公开报道,以及使用“数据开放”、“数据公开”、“政务数据资源”、“政府数据服务”、“地名政府数据”、“地名数据”等关键词进行搜索,发现了截至 2017 年 4 月我国已上线的政府数据开放平台,并将符合以下条件的开放数据平台纳入评估范围:(1)平台域名中出现 ,作为确定其为政府官方认可的数据开放平台
9、的依据。(2)平台形式为“统一专有式”或“统一嵌入式”。“统4 http:/ http:/odimpact.org/resources.html2.评估方法Methodology一专有式”是指开放数据统一汇聚在一个专门的平台上进行开放,“统一嵌入式”是指开放数据统一汇聚为一个栏目板块,嵌入在政府门户网站或政务服务网站上。各个条线部门建设的非集中式开放数据的平台不在本报告的评估范围内。(3)平台所代表的地方政府的行政级别一般为地级市以上。需要特别说明的是,作为国内最早开放数据的区级政府,佛山市南海区在国内政府数据开放领域进行了先行探索,为持续跟踪比较,“数说南海网”作为唯一的区级平台被纳入此次评
10、估的范围。(4)平台上确实开放了电子格式的、可通过下载或接口形式获取的、结构化的数据集。即使名为“数据开放”平台,但实质上只提供了非结构化的文本内容,不存在可通过下载或接口形式获取的、结构化的数据集,更多属于传统“信息公开”性质的平台未纳入本次评估范围,如江西省人民政府门户网站“用数据”模块、四川省人民政府网站上的“开放数据”模块和广东清远市人民政府网“数据开放”频道等。基于以上选择标准,被纳入本次报告评估的地方政府数据开放平台共 19 个,这些地方的平台符合政府数据开放的平台名称地点层级平台域名1北京市政务数据资源网北京市省级2开放广东数据服务网广东省省级http:/3贵州省政府数据开放平台
11、贵州省省级http:/4上海政府数据服务网上海市省级http:/5浙江政务服务网浙江省省级http:/6广州市政府数据统一开放平台广东省广州市副省级http:/7哈尔滨市政府数据开放平台黑龙江省哈尔滨市副省级http:/8青岛市政府数据开放网山东省青岛市副省级http:/9深圳市政府数据开放平台广东省深圳市副省级http:/10武汉市政府公开数据服务网湖北省武汉市副省级http:/11长沙数据开放湖南省长沙市地级http:/12数据东莞网广东省东莞市地级http:/13佛山市数据开放平台广东省佛山市 地级http:/14贵阳市政府数据开放平台贵州省贵阳市地级http:/15梅州市人民政府数据开
12、放平台广东省梅州市地级https:/ 区级http:/表 1 评估范围04|052017 中国地方政府数据开放平台报告|数据获取基本特征,是我国开放政府数据的先行者。具体平台名称、所属地方政府和平台域名如表 1 所示。“数据”是开放数据的核心,包括数据数量、种类、标准、质量和价值等方面,因此本次评估主要针对各地平台上开放的数据本身。为聚焦重点,本次评估暂不包括开放政府数据的法制、组织、技术、经济和社会环境;开放数据平台功能和体验;开放数据的使用情况和效果等方面。报告的主要观察对象为我国地方政府数据开放平台上可通过直接下载或 API 接口两种方式公开获取的、电子形式的原始数据集及其相关信息;不包
13、括平台上的 APP 应用、数据报告、可视化呈现等数据应用产品。基于开放数据的非歧视和公开获取原则,通过内部授权、协议开放等形式开放的数据也不属于本报告的评估对象。2.3 指标体系(1)指标框架复旦大学数字与移动治理实验室通过对十多个具有代表性的国内外政府数据开放评估项目在“数据层面”的评估指标进行梳理和分析后发现6,最受重视的二级指标依次是:数据标准、数据质量、数据管理、数据数量、数据类别、关键数据集等,其中开放授权、机器可读、可获取、非专属、及时、元数据提供等三级指标最受关注。在充分借鉴国际性开放数据评估报告指标体系的基础上,立足于目前我国各地开放数据实践的实际情况与发展阶段,本着系统科学、
14、多维度、可操作的原则,本报告建构了一套评估指标框架(如表3所示)。框架共包括四个一级指标:数据集总量、数据开放度、数据覆盖面与数据持续性。6郑磊、关文雯,开放政府数据评估框架、指标和方法研究,图书情报工作,第 60 卷第 18 期 http:/ 50 多位我国数据开放领域的学者和数据开发利用专业人士组成专家评委会(详细名单见报告附件)对各项评估指标的相对重要性进行排序,以反映第三方学术机构的专业视角和数据利用者们的实际需求。排序结果如表 2 所示,被排在最重要位置的指标是“数据集价值”,这反映了各界对高价值数据集的需求。然而,数据的价值要通过实际应用来展现和评估,由于目前我国政府数据开放工作刚
15、刚起步,大量高价值政府数据仍未开放,数据尚未被充分应用以展现其价值,因此本次报告暂不评估该项指标。被专家评委会排在第二至第五位的指标依次是开放数据格式、元数据提供、开放授权以及数据集更新,而开放重点领域关键数据集、数据集主题覆盖面与数据集总量的重要性相对靠后,这反映了学界和业界更为重视数据标准和数据质量,而反对一味追求数据数量。表 2 评委专家对评估指标相对重要性排序的结果指标名称排序得分重要性数据集价值3.371开放数据格式(技术性开放)3.662元数据提供3.703开放授权3.724数据集持续更新3.835开放重点领域关键数据集4.476数据集主题覆盖面4.517数据集数量4.517评估指
16、标框架及指标权重的设置意在推进我国各地开放数据实践的持续健康发展,需兼引导性、相关性、明确性、可衡量性、可实现性和动态性,综合考量国际性评估报告的2.评估方法Methodology指标体系、专家评委会的评分结果、以及目前我国各地发展现状、主要问题和亟需引导的方向,本期报告确定了各级指标对应的权重(详见表 3),对数据开放度赋予最高的权重(50%),其次是数据持续性(20%)、数据集覆盖面(15%)与数据集总量(15%)。随着各地政府数据开放实践的不断深入推进,指标框架及指标权重将进行动态调整。2.4 数据采集及分析报告采用自动抓取和人工观察方法采集数据。以 2017年 4 月 18 日为数据采
17、集始点,在之后四周内的四个时间点持续采集数据,采集时间分别为 2017 年 4 月 18 日、2017年 4 月 24 日、2017 年 4 月 30 日与 2017 年 5 月 7 日。报告主体分析部分以 4 月 18 日采集的数据为基准,而在平台数据动态更新部分则使用四个时间点采集的数据进行追踪对比分析。报告对采集到的各项指标的数据进行了描述性统计分析和交叉分析。2.5 指数计算方法报告对各地平台在各项指标上按照 0-5 共 6 档分值进行评分,由低到高分别为 1-5 分(“开放授权”指标的分值例外,4 项三级指标共 5 分,每满足一项得 1.25 分),相应数据缺失或完全不符合标准则分值
18、为 0。各地平台的最终指数总分为每个单项指标的分值乘以相应的权重,再换算成百分制。表 3 指标框架与权重06|072017 中国地方政府数据开放平台报告|数据获取图 1 各地平台上线时间3.主要发现Key Findings三、主要发现3.1 总体分布(1)上线时间自 2012 年上半年上海推出我国大陆地区第一个开放数据平台起,截止到 2017 年上半年,我国陆续上线了十多个符合开放政府数据基本特征的地级以上平台(如图 1)。以2015 年 8 月底国务院印发促进大数据发展行动纲要为分水岭,在此之前,各地开放数据平台增长较为缓慢,上海和北京最早进行了探索,此后无锡、佛山南海、湛江、武汉等地先后上
19、线;促进大数据发展行动纲要出台后各地平台增长速度明显提升,15 年下半年新上线了 4 个平台,16年下半年又增加了 6 个平台,17 年上半年也陆续有新平台推出。各地政府数据开放平台上线时间(2)地区分布截止 2017 年 4 月,我国各地上线的符合政府数据开放基本特征的平台的地理位置分布如图 2。标注为深色的为省级平台,浅色为地级市。由图可见,我国绝大多数地方政府尚未开放数据。目前上线的平台主要分布在东南部沿海地区,部分分布在西南与华中地区,长江以北分布较少。其中,广东省地级市开放平台分布尤为集中,形成了我国最为密集的省级“开放数林”。各地政府数据开放平台的地理分布图 2 各地平台地理分布(
20、3)行政层级报告对各地平台所属的地方政府行政层级及其所占比例进行了分析(如图 3)。目前各地上线的平台中地级市数量最多,省级行政区和副省级城市数量相当,然而我国共有31 个省级行政区(港澳台除外)、15 个副省级城市和 334图 3 各地平台行政层级分布08|092017 中国地方政府数据开放平台报告|数据获取浙江北京贵州广东青岛武汉无锡长沙梅州广州东莞深圳贵阳南海湛江肇庆佛山上海哈尔滨个地级市,与我国省级行政区、副省级城市、地级行政区的总数相比,已开放数据的地方所占比例普遍偏低。(4)平台类型从各地开放数据平台的类型来看,绝大多数平台以统一专有方式呈现,即开放数据统一汇聚在一个专门的平台上进
21、行开放。只有梅州和肇庆为统一嵌入式,即开放数据统一汇聚为一个栏目板块,嵌入在政府门户网站或政务服务网站上。统一专有式平台更有利于用户通过一站集中的方式发现、获取和利用数据,也是目前国际上普遍采用的方式。3.2 开放数据集总量数据集,是一种由数据所组成的集合,通常以表格形式出现,“列”代表一个特定变量,“行”对应于一个样本单位。政府数据开放平台通常以下载或 API 接口的形式开放数据集。个别平台上出现的以下三类情况,在报告中将不视作有效的开放数据集:(1)数据集名称下不存在可直接下载或通过接口获取的数据集;(2)数据集中仅有 0 行或 1 行数据(多为将一个数据集分拆出的单行数据,或未整合成一个
22、数据集的单行数据);(3)数据集名称下提供的是网页链接,且链接跳转后出现的是无法通过下载或接口形式获取的文本内容。同时,报告将各地平台上出现的以下三类情况只视作一个有效的数据集:(1)同样名称的数据集重复出现;(2)平台上标注的数据集名称不同,但实际下载后的数据集具有相同的名称与内容;(3)同一个数据集按行政区划与部门等被分拆成多个数据结构相同的数据集。各地开放数据平台开放的有效数据集总量(含直接下载和 API 接口开放)如图 4 所示。在 19 个开放数据平台中,图 4 各地平台上开放的数据集总量3.主要发现Key Findings武汉开放的数据集最多,与上海、贵阳处于第一梯队,都开放了超过
23、 1000 个有效数据集或接口;其次是青岛,开放了847 个有效数据集。其后,无锡、深圳、北京开放了 400多个的数据集;佛山、东莞、广州、南海、浙江等地开放了300 多个。4 各地平台上开放的数据集数量(包含 API 接口)3.3 数据开放度关 于 开 放 数 据 的 格 式 标 准,万 维 网 发 明 者 Tim Berners-Lee 提出了一个开放数据五星标准7:一星:基于开放授权在网络上开放数据,对数据格式不做要求,可能采用 PDF、JPEG 等格式;二星:以可机读、结构化格式开放数据(如采用 EXCEL 格式而非扫描格式);三星:在满足二星标准的基础上,以非专属开放格式开放数据(如
24、采用CSV 格式代替 EXCEL 格式);四星:在满足以上要求的基础上,为每一个数据集设置固定的 URL 链接,便于使用者7https:/www.w3.org/DesignIssues/LinkedData.html发现和链接到数据集的具体位置;五星:在满足以上要求的基础上,数据之间实现关联,以展现数据的背景。本报告基于该标准和其他有关开放数据格式的标准,重点对各地开放平台上的数据集的开放度进行评估。3.3.1 技术性开放(1)可机读格式为方便用户获取和利用数据,数据集应以可机读格式开放,该格式能被计算机自动读取与处理,如 XLS、CSV、JSON、XML 等格式。图 5 展示了各地平台上可下
25、载数据集总量与可机读数据集总量的对比。总体来看,各地平台上满足可机读格式的数据集比例较高,贵阳、上海、青岛、东莞、佛山、南海、广州、哈尔滨等平台上开放的可下载数据集基本都满足了可机读格式。但也有一些地方平台虽然开放的数图 5 各地平台可下载数据集与可机读格式数据集数量10|112017 中国地方政府数据开放平台报告|数据获取据集总量不小,但其中不少数据集为 DOC、PDF、JPG 等不可机读格式。还有部分平台虽然提供了可机读格式的数据集,但内容多为加工归总后的统计数据,并不满足开放完整的、原始的、可再利用的数据集的开放数据原则。平台可下载数(2)开放格式开放格式是指可下载数据集应以开放的、非专
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 5.8 中国 地方政府 数据 开放 平台 报告 获取 2017 上半年
限制150内