75页智慧司法大数据平台建设方案.docx
司法行政工作管建平台移讫平台WC行业“都值乏於充运行维护保障体系标准规范保障体系信息安全保障体系业务应用S水加精W崔戈 力芟理 事台q法行政大噌场将台( 电孑成界外网 I ggR于3府中心灾务523NE )邨(箝;付会| /*« Ri»«安之会. 雪如|司安行政大及据中心司去部留磐司去fBW化tt承升虫 务速克片智慧司法大数据平台建设方案智慧司法大数据平台建设方案各业务处室与省司法厅下属单位的数据交换共享;共享服务 库由基础库、主题库构成,其中基础库包括共享按部级要求进行 共享的行业基础信息;主题库将根据江苏省司法行政行业决策的 需求,结合司法行政基础数据库以及业务库,逐步构建完整的主 题库。(5)开放服务库提供开放数据库及相应数据资源建设,以政府信息资源开放 目录规定数据为基础建立的江苏省司法政务信息资源目录, 并结合行业外单位需要的数据,用于支撑行业外单位及社会公众 及社会机构的数据开放。(6)运行管理库提供运行管理库及相应数据资源建设,实现对实体库数据资 源标识和属性的管理,提供目录管理库、元数据库等功能。2. 2建设功能架构江苏省司法行政大数据资源管理平台(江苏省司法行政数据 资源交换共享与开放应用平台)业务主要包括:大数据资源管理 门户、数据综合采集、数据综合治理、数据共享服务、数据应用 能力支撑、数据安全管理。智慧司法大数据平台建设方案2. 3数据流架构江苏省司法行政大数据资源管理平台(江苏省司法行政数据 资源交换共享与开放应用平台)数据资源库的数据流结构如下图 所示:(1)数据汇聚:要求行业内外数据资源统一汇聚至省厅数 据原始库,包括从行业内各业务系统抽取原始重点价值数据到数智慧司法大数据平台建设方案据原始库和通过数据共享平台共享接入的司法部、省政府及 其他职能部门的行业外价值数据。(2)数据组织:要求基于原始库汇集的行业内外数据资源, 通过基础数据库、共享服务库、开放服务库、运行管理库的建设, 对数据进行分类并对数据质量治理,有效提升数据价值及保障数 据资源目录的持续补充、更新。(3)数据服务:要求通过数据共享门户,对行业内各业务 系统提供行业数据服务,对行业外各政府单位提供价值数据共享, 对社会机构、企业、公众提供数据开放服务。(4)反馈循环:要求通过对行业的数据服务和行业外价值 数据共享,丰富各数据使用对象原有业务系统数据种类并提升业 务效率。同时,对其新产生的价值业务数据进行再一次汇聚整合, 形成一个良性循环。2. 4数据存储架构江苏省司法行政大数据资源管理平台(江苏省司法行政数据 资源交换共享与开放应用平台)数据资源体系设计数据库存储架 构如下图所示:智慧司法大数据平台建设方案基础元素库(逻辑库)基础元素库(逻辑库)共享服务库(逻辑库)开放服务库(逻辑库)逻辑生成生产业务库(物理库)数据原始库(物理库)坦仃(物(1)要求数据存储架构包括物理库所在的物理储存层。这 一部分是需要消费磁盘存储空间进行物理数据存储的部分。具体 包括省司法厅原有建设、即将建设的生产业务库、本期项目建设 的数据原始库及运行管理库。后期根据业务需求,考虑预留各类 物理专题库和物理主题库的空间。(2)要求在物理库之上逻辑生成基础数据库、共享服务库、 开放服务库三个逻辑数据库。逻辑数据库在数据原始库基础上生 成,通过运行管理库进行元数据标识,不占用磁盘存储空间。司法厅整个数据存储架构如下:智慧司法大数据平台建设方案DWS-数据集市.主题层ODS-操作数据层2. 5共享交换体系架构江苏省司法行政大数据资源管理平台(江苏省司法行政数据 资源交换共享与开放应用平台)是江苏省大数据管理中心的重要 组成部分,要求实现与省政府政务数据共享交换平台、司法部司 法行政数据资源平台与司法共享服务平台、省级行业外业务部门 共享交换平台等系统的对接与交互。江苏省司法行政大数据资源 管理平台(江苏省司法行政数据资源交换共享与开放应用平台) 数据资源库的数据共享体系的总体布局如下图:智慧司法大数据平台建设方案司法数据资源平台和司法共享眼务:'司法数据资源平台和司法共享眼务:'市司法局吟。口I法部苏省政府省政府政务数据共享交换平台)共享与交换通过电子政务 外网进行数据 连通过电子政务 外网进微据,通过电子政务 外网进行数据新 共:法数据资源共享平台%级政法业务部I'公安法院检察院省级政法数据共享应用服务年wJ共学后理开放官理V,鲁级政法外业务部事I目录与数据言应1 I交换管理I民政厅数据质量管理1 1数据共享门户一人社厅通过政法肖级业务部门共享交换平台江苏省司法数据资源交换共享与开放应用平台专网进行通过电子政 纳卜网邺亍 数威!?(已有的数 据共享与交忙防zT ,一12S48信 息中心3.功能方案3. 1数据资源及数据库建设 3. 1. 1概述数据资源及数据库的建设主要为建设业务库、数据原始库、运行管理库、基础数据库、共享服务库、开放服务库等。业务库 负责依据数据原始库提取各业务系统的业务数据库,供本业务系 统使用。数据原始库负责实现对江苏省司法厅行政数据资源体系 在数据接入层面进行统一规划、接入、通道管理及原始数据存储。 运行管理库负责实现对实体库数据资源标识和属性的管理。基础 数据库负责针对司法行政行业中各业务系统使用频率最高、应用 范围最广、最核心的数据类别,经比选确定的核心基础数据。共 享服务库负责支撑部省司法厅各业务处室与省司法厅下属单位 的数据交换共享。开放服务库负责支撑行业外单位及社会公众及智慧司法大数据平台建设方案社会机构的数据开放。3. 1.2数据库建设方案数据仓库的建设是一个系统工程,是一个不断建立、发展、 完善的过程,通常需要较长的时间。需要对整个系统的建设提出 一个全面、清晰的远景规划及技术实施蓝图,并在已有的基础上, 结合其他业务系统,逐步构建起完整、健壮的数据仓库系统。基 于上述司法行政大数据资源管理平台数据仓库体系架构要求满 足如下需求:ODS (操作数据存储)层:用于同步源系统数据,不对源系统 数据做处理,可用于对源系统事务级的数据分析及追溯。暂存层:用于获取源系统被更新数据信息,定义规范数据接 口,仅存储发生变化数据记录信息。DW层:将数据模型化,一般以星型和雪花型设计数据结构, 形成共享维度和层次关系。DM集市层:根据明确业务场景及需求设计,一般以CUBE方 式进行存储,数据大多经过逻辑运算。在省司法厅数据仓库中,存储整合、转换后的数据,通过数 据分层管理、数据仓库建模以及多维分析数据库技术的应用,使 得每一类数据可以快速提供不同层面的分析应用,形成全面统一 的数据视图。3. 2数据资源管理平台建设数据资源管理平台建设要求包含:司法行政法大数据资源管智慧司法大数据平台建设方案理门户、数据综合采集子系统、数据综合治理子系统、数据 共享服务子系统、数据能力应用支撑子系统、数据安全管理子系 统。3. 2.1大数据资源管理门户3. 2. 1. 1功能概述司法行政大数据资源管理门户,作为数据能力提供和展示的 窗口,将数据综合采集子系统、数据综合治理子系统、数据共享 服务子系统、数据应用能力支撑子系统和数据安全管理子系统有 机的结合起来,提供界面化的能力支撑,实现总体运行可视化、 数据汇聚可视化、数据共享服务可视化、数据质量可视化、数据 应用可视化等。3. 2. 1.2功能设计1、总体运行可视化要求满足,总体运行可视化基于宏观指标层面,全面展示数 据中心总体运行情况。2、数据汇聚可视化要求满足,数据汇聚可视化设计展示内容包括整个数据中心 在数据汇聚层面的关键指标。3、共享服务可视化要求满足,共享服务可视化设计主要展示内容的指标包括对 数据共享的总记录情况。4、数据质量可视化智慧司法大数据平台建设方案要求满足,数据质量可视化对数据中心的质量运行情况,提智慧司法大数据平台建设方案取关键指标进行展现。5、数据应用可视化要求满足,数据应用可视化基于各数据应用部门或指定应用 系统或业务的数据应用情况概览。3. 2. 2数据综合采集子系统3. 2. 2. 1功能概述要求满足,基于分布式架构的数据综合采集子系统提供数据 抽取、集中、加载、转换、传输及共享等功能,可为不同系统间 信息数据交换、信息数据共享以及信息数据业务协同等任务提供 基础。支持多源异构数据采集与管理,多种加密、解密算法配置 等功能,从而可以保障数据在传输中的安全以及数据在存储过程 中的安全。3. 2. 2. 2功能设计3. 2. 2. 2. 1数据接入能力及范围要求满足,传统数据库(结构化数据)类、半结构化数据(文 本)类、大数据平台类数据的接入能力。3. 2. 2. 2. 2数据接入模式要求满足,全量数据接入和增量数据接入模式。1.全量数据接入全量抽取类似于数据迁移或数据复制。是指将源系统表或视 图中的业务数据一次性全量获取到并导入数据仓库的接口数据 层,全量抽取比较简单。智慧司法大数据平台建设方案目录1 .项目概述3项目背景3(一) 项目目标32. 总体框架4逻辑架构4(一) 功能架构53. 建设任务54. 建设内容6司法行政大数据资源管理平台6(一) AI支撑服务平台380A办公档案管理系统48(二) 办公支撑服务平台54服务总线58(三) 运维管理平台60规范与管理体系67智慧司法大数据平台建设方案.增量数据接入要求满足时间戳模式和标志位获取模式。2 . 2. 2. 2. 3 数据 ETL1、数据抽取数据综合采集子系统要求满足可采集具备不同数据源中符 合指定规则的数据,并可实现数据的统一采集。要求满足抽取后 的数据存储支持落地与不落地二大类进行,抽取后的数据可以为 数据清洗环节提供输入,也可以直接进行处理或者加载。要求满足,手工和自动两种抽取方式、多种抽取模式与策略 定义、灵活的数据源定义管理能力、异构数据源进行数据采集、 多种数据库连接方式、基于日志的增量数据捕获能力(OGG)、丰 富的数据采集作业执行状态监控管理能力等。2、数据清洗要求满足,数据综合采集子系统可以对偏差以及“脏”数据 进行清洗、对数据粒度的转换以及依据一些业务统计量计算统计 值。3、数据转换要求满足,在数据流转过程中为了提升数据可靠性,需要对 数据进行转换、过滤、清洗等数据处理操作。数据处理能力实现 了数据检查、数据标准化处理、汇总、装载、库内处理等功能。数据综合采集子系统对接单个或者多个数据结构相同的接 口文件进行转换,在数据不落地的情况下,可以直接从管道中读智慧司法大数据平台建设方案取接口文件的数据内容进行转换。要求满足,数据清洗装换、 数据映射转换、数据加密转换;4、数据分发要求满足,数据综合采集子系统支持多种异构数据分发方式, 包括内存不落地异构数据分发和文件落地异构数据分发方式及 第三方开源工具。5、数据加载要求满足,数据综合采集子系统参照业界技术规范标准,结 合不同行业应用诉求特点对数据装载功能模块进行了个性化能 力扩展,内置了全量装载、增量装载、增量更新装载、月初全量 其他增量加载、双加载等多种装载方案,能够满足在海量数据规 模的情况下通过远程分布式多节点并行对数据装载能力的诉求。要求满足,支持对多类型数据目标的加载、支持数据批量加 载、支持多种加载模式与策略定义、支持文件落地和不落地两种 存储加载、支持自动和手工两种加载方式、支持多任务并行加载、 支持加载对象的参数配置、过滤、支持脚本加载事务处理、支持 数据加载对目标表的操作等。数据加载功能具备双加载功能,指支持在一个作业中像多个 目标加载数据。要求满足,主要加载方式采用文件落地加载和采 用内存不落地加载。3. 2. 2. 2. 4数据资产目录要求满足,数据资产目录是数据资产总体情况的展示窗口,智慧司法大数据平台建设方案支持主题维度,业务维度,部门维度等多维分类检索,为不 同角色用户开放不同元数据视图权限,为不同的角色提供不同的 功能。3. 2. 2. 2. 5任务调度要求满足,任务调度平台具备外部服务接入、调度优化、调 度管理、调度监控等优势,调度管理模块采用灵活的cron表达 式,满足95%以上的定时任务需求,支持年、月、日、时、分的 周期调度,同时调度支持事件触发、外部触发等触发策略,支持 顺序启动、唯一启动、多重启动、周期内顺序启动等多种运行类 型。要求满足调度系统server调度系统agent、心跳检测机制。3. 2. 2. 2. 6 统一监控数据综合采集子系统提供web的监控功能,多个数据接入服 务器可以在web监控界面查看。要求满足,总体监控、主机监控、数据库监控、任务监控告 警、接入点流量监控、日志监控。3. 2. 2. 2. 6. 1总体监控要求满足,监控页面提供数据库系统、资源概况、数据概况、 热门服务、热门订阅、数据接入点流向图等。提供图形化服务的 添加和监控,当服务出现异常时可以通过前台进行对服务的启动、 停止等操作。3. 2. 2.2. 6. 2主机监控智慧司法大数据平台建设方案要求满足,实时采集主机的运行参数,包括存储空间、CPU、智慧司法大数据平台建设方案内存等信息,对于使用率超过阈值的将通过告警通知平台告 警。3. 2. 2. 2. 6. 3数据库监控要求满足,可支持对数据库的运行状态进行实时监控,运维 人员通过图形化界面准确掌握数据量的存储空间信息、已用空间 信息、使用率、运行状态等信息。3. 2. 2. 2. 6. 4任务监控告警要求满足,任务监控可以满足在任务运行周期中,各个批次 任务运行状态,成功率、失败率、运行总数等内容的监控,异常 失败任务可通过对接短信平台或邮件平台进行及时的任务告警, 也可对失败任务进行定点重做,保证数据的完整性。3. 2. 2.2.6. 5接入点流量监控要求满足,提供统一监控服务,包括对文件、库表、接口服 务等数据交换流量的统计,对各类数据各业务部门之间的流入流 出量进行准确统计监控,对数据的接入方向提供动态图标指向。 可以查看各业务库、任意时间段内的数据流量状况。3. 2. 2. 2. 6. 6日志监控要求满足,提供多种类型的应用程序日志和安全日志。其中 应用程序日志主要包括:记录对数据库访问操作、服务器运行状 态、应用软件操作等;安全日志主要包括:记录有效或无效登录 尝试等事件,以及关键资源相关的事件等。3. 2. 3数据综合治理子系统智慧司法大数据平台建设方案3.2.3. 1功能概述智慧司法大数据平台建设方案数据治理的英文是Data Governance,DAMA数据管理知识 体系指南中的定义:数据治理是对数据资产管理行使权力和控 制的活动集合(规划、监控和执行)。数据治理并不是一个新生 事物,可以说,有数据的地方就存在数据治理,只不过随着数据 应用的迅猛发展将它提到了一个高度,作为一个独立的研究领域。 数据治理并没有标准的、严格的定义。概况地讲,所有为提高数 据质量而展开的业务、技术和管理活动都属于数据治理范畴。构 建数据治理体系是数据治理工作的基础,为了有序实施数据治理, 应采用规划先行的原则,制定适合司法行政业务特点的管理流程, 选择可行的技术方案和实施工具,明确数据治理的工作机制和工 作内容,稳步推进数据治理各项工作。3. 2. 3. 2功能设计3. 2. 3.2. 1数据架构统一管理要求满足,数据综合治理子系统的权限管理包括角色、用户、 团队、和资源授权管理。3.2. 3. 2.2审批流程统一管理要求满足,针对数据标准发布、物理模型发布、逻辑模型发 布提供统一的审批流程管理。3. 2. 3. 2. 3数据源统一管理要求满足,数据综合治理子系统支持多种数据源的连接,包 括主流的关系型数据库、Excel/CSV文本数据源,基于大数据平 台数据源以及其它的JDBC数据源。智慧司法大数据平台建设方案3. 2. 3. 2. 4数据标准统一管理要求满足,根据司法行政业务属性,建立起一套统一的标准 化体系确保数据协调一致,管理一致,使用一致。解决源系统不 规范的命名方式,而出现的同名不同义,同义不同名的问题。要求满足,系统通过以下几个方面着手建立起一套数据标准 体系:数据分类的标准规范数据字典的标准规范数据模型的标准规范维度代码的标准规范数据项的标准规范3. 2. 3. 2. 5元数据管理要求满足,提供多种异构数据源的元数据的采集和维护管理, 基于规范有效地实现了元数据的依赖关系,变更控制,版本控制 等核心的能力,通过元数据的血缘分析,影响分析帮助数据生产 单位有效的维护和管理数据,帮助用户了解数据,为数据的处理 和使用提供有效的信息。要求满足元数据管理范围、元数据维护、元数据采集、元数 据版本管理、数据看板等功能。3. 2. 3. 2. 5. 1元数据管理范围要求满足,元数据管理提供了丰富的管理工具,包括系统资 源管理,逻辑表管理、数据表管理、文件管理、指标管理等元数智慧司法大数据平台建设方案3.2. 3. 2. 5. 2元数据维护要求满足,系统元数据维护提供对元数据的增加、删除和修 改等基本操作。3. 2. 3. 2. 5. 3元数据采集要求满足,rdb类数据库采集、大数据平台类采集、ETL工 具类元数据采集、BI工具及模型设计工具类采集。3.2. 3.2. 5. 4元数据版本管理要求满足,版本管理是记录元数据各个可选状态的快照,版 本管理的任务就是对元数据的历史演变过程进行记录和维护,根 据实际应用背景选择合适的版本,保证不同版本在逻辑上的一致 性和相对独立性,一个版本的产生和消失不会对其余版本的内容 产生影响。3. 2. 3.2. 5. 5数据看板要求满足,提供图形化方式展示数据总体情况,从主题、数 据层次、数据库、团队等维度统计数据情况。3. 2. 3. 2. 6数据质量管理要求满足,支持对业务数据进行全面质量管控,通过对数据 模型质量检查规则配置,及时地发现问题、解决问题。提升数据 的完整性、及时性、准确性和一致性,从而保证数据的价值。包 括:质量规则管理和质量检查报告。要求满足,数据质量问题跟踪、数据质量规则配置、数据质智慧司法大数据平台建设方案量监控、数据质量报告、数据质量评估、知识库管理等。3. 2. 3. 2. 6.1数据质量问题跟踪问题分类要求满足,定义缺失、数据异常、信息缺失或不准确、代码 问题等问题。对于特殊数据质量存在异常,系统根据质量问题进 行登记统计并且按照质量异常级别进行告警,对于告警级别严重 的规则质量进行问题推送,并对异常数据进行溯源和处理。问题告警反馈要求满足,数据质量告警可分为一般告警和严重告警,用户 可以分别配置告警的阈值以及对应的处理方式。3. 2. 3. 2. 6. 2数据质量规则配置要求满足,系统通过配置检查对象的需要检查的内容,进行 各种规则组合到达对数据质量检查的目的。支持质量规则的增、 删、改、查操作。要求满足,支持多种检查规则,包括不限于如下规则:及时 性检查、同比检查、环比检查、数值检查、值域检查、空值检查、 重复检查。3. 2. 3.2.6. 3数据质量监控数据质量检查过程进行实时监控,实时掌握数据质量检查状 态,对数据质量检查过程进行全景展现,用户准确了解数据质量 检查各环节所存在的问题。要求满足,定时调度检查、后台服务运行、质量检查高效稳智慧司法大数据平台建设方案1.项目概述(一)项目背景近年来,为贯彻落实党的十九大关于网络强国战略部署,在 省委、省政府、司法部的高度重视和正确领导下,江苏省司法行 政工作取得快速发展,特别是通过加强运用信息化技术手段,有 效的提升了司法行政服务效能。全省坚持统一规划、统一建设、 统一标准,着力抓好信息化顶层设计,围绕“大平台、高整合、 高共享”的建设目标,于2013年提出并实施了江苏省司法行政 一体化智能平台建设,形成了 “2+1+N”的总体架构,有力推动了 全省司法行政工作,2019年根据江苏省机构改革方案,将原 省司法厅和原省政府法制办公室(以下简称原省法制办)进行职 责整合,并将省委全面依法治省委员会办公室设在省司法厅,客 观上也需要进一步加强信息化建设。为进一步贯彻落实国家、部省关于数字法治建设要求,深入 贯彻落实全国司法行政信息化工作推进会议精神,亟需扎实推进 江苏“数字法治智慧司法”信息化工程项目建设,建成具备江 苏特色、全国领先的信息化体系。(二)项目目标紧密契合司法部、江苏省委省政府要求,围绕“数字法治智 慧司法”信息化建设总体目标,基于省厅现有框架,完善整体架 构、夯实基础支撑、优化系统功能、提升智慧司法、加固网络安 全,打造具备江苏特色、全国领先的司法行政信息化体系智慧司法大数据平台建设方案定。要求满足,支持按周期形成质量分析报告,包括由变更引起 的质量问题和影响,以及问题处理的情况等内容。支持针对数据 完整性、数据唯一性、数据合法性、编码检查、统计口径形成数 据源质量评估报告。3. 2. 3.2. 6. 4数据质量报告要求满足,数据检查结果展现:根据检查对象和检查项,查 看数据质量检查的结果,根据数据库、规则、主题的维度以图表 的形式展现数据质量检查综合结果。要求满足,血缘质量分析:采用前向元数据,将元数据的管 理融入了开发环境,保证开发过程中元数据满足管理要求,提高 了及时率和准确率。3.2.3. 2. 6. 5数据质量体检要求满足,提供完备的数据体检功能,能够结合标准和规则, 进行自动的汇总分析,支持从数据质量、冗余度、效能波动、成 熟度模型多维度进行评估分析,并支持数据质量的评分审计。3.2. 3. 2. 6. 6知识库管理要求满足,对质量运行过程中出现的问题进行解决跟踪定位, 自动形成知识库。用户在知识库查询界面搜索关键字了解过往应 对问题的处理办法。3. 2. 3. 2. 7数据目录数据资产目录是数据治理建设成果的主要展示窗口之一,系智慧司法大数据平台建设方案统将自动建立数据资源目录,数据资源目录为不同的角色用 户提供不同的资源价值。要求满足资源检索、数据订阅、血缘分析、数据共享申请等。3. 2. 3. 2. 7. 1资源检索要求满足,数据目录提供数据标准、物理模型、逻辑模型、 程序、接口、文件等多种对象的快速分类检索,每种对象并提供 不同维度(主题、团队、层次、业务主题等)和关键字的检索方 式。3. 2. 3. 2. 7. 2数据订阅要求满足,针对数据的使用者,数据目录提供了一键订阅的 功能;一键订阅主要针对各业务单位数据之间的流转而搭建的快 速化配置的方式,实现数据的分发。3.2,3. 2. 7. 3血缘分析要求满足,提供版本间的血缘分析,记录每个版本的血缘关 系图,当元数据版本发生变化时,产生新的血缘关系,并保留历 史血缘关系图。对不同版本之间的血缘关系提供差异化对比功能, 通过界面展示不同版本间血缘关系的差异性。3. 2. 3.2. 7. 4数据共享申请要求满足,数据目录也提供针对外部使用者,例如第三方厂 商需要使用数据,也可进行数据共享申请。3. 2, 3, 2. 8数据视图要求满足,提供全方位的数据视图,一目了然的掌握数据智慧司法大数据平台建设方案360度的情况。包含数据分布、数据量、数据趋势、数据质 量、标准化程度、服务调用情况、数据流转情况。3. 2. 4数据共享服务子系统3. 2.4. 1数据共享管理数据共享管理是为了满足司法厅各业务处室之间数据联通 和司法厅与司法局之间数据联通的需求,通过数据共享的方式将 数据在各业务处室之间和司法厅与司法局之间进行流动。下属单 位需要从大数据资源管理平台进行共享数据的申请、审批、下载 等操作时,需要向数据共享服务子系统提出对象申请,通过司法 厅数据中心批准后才能够实现数据联通,同时数据共享服务子系 统也会对共享数据进行实时追踪和记录。此外司法厅数据中心会 对司法厅与下属单位之间数据联通进行全程管理。3. 2.4. 1.1数据订阅服务1、数据订阅要求满足,数据订阅申请、数据订阅审核、数据订阅查询、 数据订阅取消、数据订阅排行、数据订阅分析。2、接口订阅及接入要求满足,接口订阅申请、接口订阅审核、接口订阅查询、 接口订阅取消、接口订阅排行、接口订阅分析。3、外系统获取接口要求满足,外系统获取接口可将权威数据通过统一标准接口进行获取与保存。智慧司法大数据平台建设方案4、数据服务授权要求满足,通过能力梳理与资源整合,将数据服务平台的服 务能力及资源进行梳理与整合,逐步形成组件化、标准化和开放 化的总线架构,丰富应用层各模块能力,提高大数据平台数据服 务的适应性和可扩展性。3. 2.4. 1.2数据交换服务要求满足,数据交换服务是数据服务平台的核心服务部分, 是司法部、司法厅、司法局、基层司法所等各成员单位之间的数 据交换和跨部门业务支撑的基础,是实现跨网系、跨层级、跨应 用,一级部署四级服务的数据资源共享的通道。共享交换服务主 要分为前置交换系统和中心交换系统两部分,并支持业务系统以 服务的方式接入服务总线进行对接。3. 2.4. 1.3数据下载服务要求满足,数据下载服务提供数据的发布、管理、下载、查 询和统计等功能,需求者可通过预先预定的数据交换协议,将数 据共享服务库中相关信息资源生成XML文件,相关应用系统获取 下载,并在本地完成数据装载,供相关业务系统使用,包括数据 发布、发布内容管理、可下载数据查询、数据下载、数据下载排 行统计、数据下载日志。3. 2.4. 1.4数据接口服务1、接口配置管理要求满足,对共享数据的内容和共享接口规则进行配置,包智慧司法大数据平台建设方案括基础数据配置、共享服务配置、共享权限和共享配置下发、 数据接口过程等。2、数据接口管控要求满足,通过各种数据共享访问提供数据服务共享。包括 共享过程监控、共享异常处理、共享日志管理、查询统计分析。3、可视化管理要求满足,系统提供管理界面,可基于该界面,包括可视化、 可配置、可管理。4、接口开放方式要求满足,数据共享服务实现机制中采用的主要方式,包括 消息交互方式、发布订阅方式、数据库方式三部分。3. 2. 4. 2数据开放管理3.2.4. 2. 1功能概述数据开放管理是司法厅统一的数据对外提供窗口,通过统一 的封装将司法厅的数据提供给外部单位,例如司法部司法行政数 据资源平台、省级行业外业务部门共享交换平台、司法共享服务 平台、政法共享协同平台、省政府政务数据共享交换平台等。3. 2. 4. 2. 2功能设计要求满足,数据开放管理平台包含3类用户角色:服务提 供者、服务使用者、平台管理员。3.2.4. 2.2. 1服务在线编排要求满足,数据中心对内或对外提供数据服务需要经过服务智慧司法大数据平台建设方案的创建及服务功能在线组件编排,在线编排功能是数据共享 服务平台中一个很重要的功能,API服务的创建、修改都是在此 功能中完成的。API流程编排要求满足,API开发流程分为基本信息创建、创建服务、测 试、发布四个步骤,各个步骤中包含了 API创建、API修改、API 停用、API废除、API授权等操作。API操作方法要求满足,API开发者可以使用拖曳的方式将原子功能拖入 编排的功能编排区内,API在执行过程中会自动执行该节点功能。 执行时会按照箭头方向顺序执行,直到执行最后一个节点,返回 结果数据。3. 2. 4. 2. 2. 2数据服务管理要求满足,数据服务管理包含服务创建、修改、发布、暂停、 启动、申请、授权的全生命周期管理。主要包括数据服务管理能 力、数据服务查询能力及数据服务适应能力三大方面。1 .数据服务管控能力要求满足,服务权限控制和生命周期管理。2 .数据服务查询能力要求满足,文件代理、HTTP代理、SQL查询、HBASE查询、 文件上传、JS脚本、ESSQLo.数据服务适用能力智慧司法大数据平台建设方案要求满足,在线测试、多种报文格式、同步异步请求等。3. 2.4. 2.2. 3服务目录要求满足,数据服务API审批通过后各团队的开发人员、业 务人员可在服务目录查看已发布的服务,并可提出使用申请。服 务目录是对可使用的服务的窗口展示,可基于服务的分类、资源 类型、服务范围以及授权类型等维度类型进行快速检索,找到所 需的服务。3. 2. 4. 2. 2. 4服务安全管理要求满足,数据开放管理在安全方面,可以通过黑白名单, 密钥算法,API授权等方面进行控制。密钥算法直接设置在API 的输入参数,输出参数上,可以最大限度地保证数据的安全访问。 包括黑白名单管理、算法规则管理、安全策略管理等。3. 2.4. 2. 2. 5服务审计和监控要求满足,数据共享服务子系统提供审计能力,每一次的数 据服务调用都将记录调用日志,详细记录调用情况,包括调用人, 调用时间,接入的IP,调用的接口,返回数据量,是否成功,响 应时长等信息。3. 2. 5数据应用能力支撑子系统3. 2. 5.1数据分析能力支撑3. 2. 5. 1. 1 BI分析支撑工具3. 2. 5. 1. 1. 1图表组件要求满足,提供丰富的统计图表类型:条形图、柱状图、折智慧司法大数据平台建设方案线图、面积图、饼图、玫瑰图、旭日图、雷达图、散点图等。3. 2. 5. 1. 1.2自定义门户要求满足,支持门户自定义功能,允许用户自定义门户布局 及风格,提供丰富的页面显示风格和各种高级界面设置,可以对 门户做全方位的规划,可为门户做权限控制。3. 2. 5. 1. 1. 3多维分析要求满足,多维分析模块提供了钻取、旋转、切片等功能, 可以得到不同粒度的数据;钻取功能能够支持多样的钻取模型。 切片功能可以变换数据分析的角度。3. 2. 5. 1. 1.4地图分析要求满足,地图上的区块可根据指标条件显示不同的颜色, 用户将鼠标移到地图上的某一区域,可以显示此区域的相关数据。 提供内置地图,并提供专门的地图管理界面用来查看管理系统自 带地图,还可对系统地图进行克隆编辑。3. 2. 5. 1.2研判报告生成器要求满足,对各类指标数据进行图表类型的勾选及更多分析 配置,可自动生成文字及图表形式的研判报告,生成后实时推送 给用户,方便用户进行报告数据查看、分析、汇报。3. 2. 5. 1.2. 1预置研判报告生成要求满足,针对平台预先设置的研判报告模板,设定相应的 生成时间,平台自动抓取数据生成相应的研判报告。包括编辑器 功能、导出word/pdf、收藏、打印等。智慧司法大数据平台建设方案自定义研判报告生成要求满足,平台除了提供预置研判报告的生成,对于特殊要 求,可以自行配置生成相应的研判报告模板,通过设定报告生成 时间,自动生成研判报告。包括指标项配置、时间范围配置、主 题配置、分析配置。3. 2. 5. 1.3智能可视化大屏3. 2. 5. 1.3. 1领导驾驶舱要求满足,提供领导驾驶舱功能,通过领导驾驶舱功能可以 实现一些关键指标的展示,通过一系列的分析手段的组合,可以 实现对关键指标的快速、直观的展现。3. 2. 5. 1.3. 2数据大屏要求满足,提供数据大屏的能力,根据大屏的长宽尺寸定制 大屏展示内容,通过条形图、柱状图、曲线图、折线图、热点图、 热力图、雷达图等各类数据可视化图表工具,展示各类数据。3. 2. 5. 1.4智能分析报表要求满足,智能分析报表,提供可视化、简单易用的智能报 表工具;可以任意组合维度和指标;可以任意钻取和切片;报表 格式能迅速以所见即所得方式进行显示。3. 2. 5. 2数据模型能力支撑3. 2. 5. 2. 1分布式机器学习能力要求满足,基于机器学习解决挖掘分析实施服务的步骤,分为定义问题、数据预处理、算法选择、结果优化、结果展示。智慧司法大数据平台建设方案分布式高速SQL查询引擎能力要求满足,基于司法厅建立的大数据平台和数据仓库,通过 数据仓库的高速Sql工具引擎,进行数据的快速、交互式分析, 可以快速发现数据价值。基于数据仓库的数据挖掘分析实施服务 的步骤,分为定义问题、选择合适的数据仓库/数据集市、数据 处理、结果展示。3. 2. 5. 2. 3海量数据的模糊查询能力要求满足,支持通过SQL实现大数据上的秒级全文搜索, 它利用层次化存储、堆外内存管理等创新性技术,极大的提高了 系统的可用性。用户可以通过类似搜索引擎的界面,实现对所有 对接的海量信息的快速查询、访问。3. 2. 5. 2. 4要素化标注与提取能力要求满足,提供司法行政非结构化数据要素化标注与提取能 力,一方面将司法行政领域的电子文书档案快速转换为易存储、 易统筹管理的结构化数据;另一方面,通过利用字符串算法构造 文本解析模型,针对不同类型的文书,自动调用文档模型,从多 个维度对文书进行分段解析,自动形成文书目录结构,为律师管 理、法律援助、社区矫正等司法行政信息化工作提供数据支撑。3. 2. 6数据安全管理子系统3. 2. 6. 1功能概述在数据应用推广过程中,必须坚持安全与发展并重的方针, 为数据安全健康的发展构筑稳固的体系。严防数据泄露和数据破智慧司法大数据平台建设方案,率先实现“大平台共享、大系统共治、大数据慧治”的新 格局。并且重点在完善整体架构、夯实基础支撑、优化系统功能、 提升智慧司法、加固网络安全五个方面取得突破。2 .总体框架(一)逻辑架构按照“数字法治智慧司法”信息化建设的要求,基于江苏 省司法厅信息化建设现有框架进行新一轮信息化技术体系完善 升级建设。具体内容如下。12348公共法律服务平台公共法律服务融合办理非诉纠纷的分哙门户层司法行政工作管理平台移动平台宜它行业外部信息系统全面依法治百行政立法行政执法协调荔督升级新建保留指挥运行维护保障体系标准规范保障体系信息安全保障体系业务应用层Y '、,、,',、” 、,、,、,/ /、,行叶执三部门行正三主部门1二季隙公共法律服务集合保心与福管理.二,主院悭法啊分局T三通言法行政应整 汨B台而台安置特教至貌省政务云 (主数据中心)筑一移动充浮服三三三支程服务平台基础能 力支理 平台:二一一理信息支浮服务平台司;去古口 皆誉司三信息 化体系都匚用壬折部工用土度F占部司当亍记W丁据 中心信息流转 协同中心基讹设施层省厅(鼠数据中,g灾备中心)存恃设备网络设备安全设备备份设备电子政务外网计复设备据中心“数字法治智慧司法”逻辑架构具体包括:门户层:公共法律服务融合办理平台、非诉纠纷化解平