《城市地质数据库结构设计与质量控制方法探究.docx》由会员分享,可在线阅读,更多相关《城市地质数据库结构设计与质量控制方法探究.docx(10页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、城市地质数据库结构设计与质量控制方法探究李叶繁成果馨 wmtss 据成果馨 wmtss 据图1数据库逻辑层次结构辅助联库摘要:城市地质数据具有多样性、不确定性和复杂性,为实现多源、异构、海 量数据的有效管理与高效访问,本文全面分析了城市地质数据的构成及特点, 3中华人民共和If自然资源部.DZ/T 0352-2020.城市地质调查数据内容与数 据库结构S.北京:自然资源部地质出版社,2020.4陆敬华.地质数据特点与分类J.黑龙江科技信息,2013 (13) : 32.5谭永杰,文敏,朱月琴,等.地质数据的大数据特性研究J.中国矿业, 2017, 26 (9) : 67-71, 84.6李玉.
2、城市地质数据集成与共享技术研究D.成都:成都理工大学,2020.7陈泽鹏,黄睦谨,江齐英,等.城市地质大数据中心关键技术研究与设计 J.科学与信息化,2021 (19) : 34-35.8何学洲,向运川,王杨刚,等.全球地质矿产数据库质量控制体系建立与应 用J.中国地质,2015, 42 (2) : 737-744.9 Liang D. , Hua W. , Liu X. , et al. Uncertainty assessment of a 3D geological model by integrating data errors, spatial variations and cogn
3、ition biasJ. Earth Science Informatics 20201, 14: 161 - 178.一全文完一结合国内城市地质调查数据现状和应用需求,参考城市地质调查数据内容与 数据库结构等相关规范,开展了城市地质数据建库内容与结构设计,建立了“纵向层次、横向专业”的数据库结构,并针对性地探讨了数据建库过程中的 质量控制措施,确保城市地质数据建库质量,为探讨本轮城市地质调查数据资 源建设提供了建议指导。Key:城市地质数据库结构设计质量控制Abstract: Urban geological data has features of diversity, uncertain
4、ty and complexity. In order to realize the effective management and efficient access of multi-source, heterogeneous and massive data, the composition and characteristics of urban geological data are comprehensively analyzed in this paper. Combined with the current situation and application requireme
5、nts of domestic urban geological survey data, and referring to relevant specifications such as , the content and structure design of urban geological data database construction are carried out, the database structure of vertical level and horizontal specialty*1 is established. And the quality contro
6、l measures in the process of data database construction are discussed to ensure the quality of urban geological data database construction, which provides suggestions and guidance for the construction of data resources of this round of urban geological survey.Key Words: Urban geology; Database; Stru
7、cturaldesign; Qualitycontrol地质数据是国民经济建设和社会可持续开展非常重要的信息资源,城市地质 数据库是建立城市地质信息共享服务技术标准的关键内容之一。基于城市地质 数据库的地质数据中心建设,可以实现地质数据的规范采集处理、合理存储、 科学管理和有效使用。当前,地质部门管理的地质数据按照数据类型划分有空 间数据、非空间结构化数据、非结构化的描述数据,本文介绍了城市地质数据 构成及特点、数据库内容与结构设计以及数据建库质量控制相关要点。1城市地质数据构成及特点城市地质数据构成我国自1999年开展国土资源大调查以来,积累了大量数据,主要包括不同比例 尺的地质空间数据库、
8、地球物理和地球化学专题数据库、矿产数据库和潜力评 价数据库,建成了 10大类48个国家地质数据库,成为国家空间数据的重要组 成局部。本轮多要素城市地质调查(2017-2025)开展了工程建设与地下空 间开发利用条件、地质资源种类、水土环境指标、地质灾害类型等调查评价, 应用了丰富的包括钻探、地表观测、电法、地震、地质雷达、测井、遥感、原 位测试、综合成果应用等技术手段与方式,更是进一步获得了大量城市基础地 理、基础地质、水工环地质、地球物理、遥感、地球化学、地质灾害、地质资 源等多类型数据。此,依据城市地质调查的采集手段、数据来源和成果阶段,城市地质调查的 数据内容可分为野外调查、工程施工与试
9、验、地质环境监测、地质成果4个大 类,用来描述基础地质、工程建设与地下空间开发条件、地质资源、土地与地 下水环境、地质灾害等方面的专业信息。野外调查、工程施工与试验数据是 对包括岩石、地层、构造、地貌等地质现象,通过野外综合调查、施工勘探、 样品试验等手段直接获取的数据。地质环境监测数据是对地下水、地质灾害等 自然地质环境或者工程建设影响的地质环境及其变化,进行定期观察测量、采 样测试、记录计算等产生的数据。分析评价成果数据是对地质调查和地质环境 监测数据进行加工处理、综合研究和分析评价所产生的地质专题成果数据。此 外,城市地质数据还应包括与地形地貌、地质构造、地层岩性、水文地质条 件、不良地
10、质作用、可利用土体资源、地热资源、地下水资源、水土环境质量 等相关三维模型数据。1.1 城市地质数据特点城市地质数据具有多样性、不确定性和复杂性,往往来自不同时期、不同单 位(部门)、不同工程,其存储介质可能是纸质的或磁盘(磁带、光盘等)形 式的,其表现形式可能是文字(文字报告)、数据库文件(Access. SQL Server. Oracle等)或图形图像等。同时,城市地质数据还具有大数据特性, 呈现多元(源)、异构、多态、时空关联、大容量高相关、价值低密度、复杂 与不确定性等特点。2数据建库内容与结构设计由于城市地质数据来源广、类型多、数据量大、关系复杂,要实现多源、异 构、海量数据的有效
11、管理与高效访问,数据建库首先要对数据及相互关系进行 整理,根据数据特点进行分类,并实现数据的分层管理;其次根据数据类别、数 据层次等要素,分别设计数据存储的逻辑结构、物理结构、访问控制方式、备2. 1城市地质数据库内容依据城市地质数据构成分析,城市地质数据库建设内容包括基础数据库、专题 数据库、成果数据库。3. 1. 1基础数据库基础数据是指或采集到的非常珍贵的第一手资料的数字化形式,是数据库 建设的基础,其他层次的数据都是基于原始数据而建立的,除非数据输入错 误,原那么上不能对这类数据进行修改。这一层次的数据包括以下类型。(1)地质馆藏地质资料,包括报告、图片及原始档案。(2)钻孔原始资料(
12、各类钻孔(井)卡片中的野外现场描述、深井档案、各种 测试数据)。(3)水文地质与地质环境监测原始资料。(4)地球物理勘探数据。(5)地球化学调查中获取的土壤、地下水、地表水采样等原始采样数据。(6)在地质、矿产调查过程中收集到的其他原始数据。在建立基础数据库过程中,原始数据应按照原有的数据格式和数据结构进行管 理,不做任何变动和转换。只是在辅助数据库中加上对原始数据库的字典描 述,以实现对原始数据层的数据识别和管理。4. 1.2专题数据库专题数据是指能够进行GIS查询统计、分析应用、三维建模等所使用的数据, 是基于基础数据经标准化处理或重新解释后得到,对这局部数据允许利用系统 提供的工具进行增
13、、删、查、改等操作。本工程中的专题数据指通过野外调 查、工程施工与试验等地质调查活动获取的数据进行标准化处理后得到的数 据,以及对地下水、地质灾害等自然地质环境或者工程建设影响的地质环境及 其变化进行定期观察测量、采样测试、记录计算等产生的数据。2. 1.3成果数据库成果数据库包括分析评价成果数据库和三维地质模型数据库。分析评价成果数 据库由用户基于基础数据、监测数据经综合分析应用得到,允许进行编辑修 改。具体包括成果图件、基于评价模型生成的评价结果数据集和各类成果报 告。三维地质模型数据是利用三维地质建模工具基于基础数据、专题数据、监测数 据构建的包含与地形地貌、地质构造、地层岩性、水文地质
14、条件、不良地质作 用、可利用土体资源、地热资源、地下水资源、水土环境质量等相关信息的模 型数据。2.2数据库逻辑层次结构整个数据中心采取纵向分层,横向按专业的原那么进行数据库的逻辑组织。(1)纵向上分为3个层次:基础数据层、专题数据层和成果数据层。(2)横向上,每一个数据层次按照专业进行划分。(3)在3个数据层次之外,建立辅助数据库,协调各个层次数据库之间的关 系。其中,基础数据层与原始数据库的结构保持一致,不改变原有的数据结构和数 据组织方式;专题数据层划分为基础地理、基础地质、地球物理、地球化学、矿 产勘查、潜力评价等几大专题,是从原始数据层解释而来的数据库,并重新进 行了数据组织,存储在
15、大型关系数据库中;成果数据库主要管理提供的成果图 件、三维模型、报表报告等,存储在大型关系数据库中;此外,为了管理各个层 次的数据库,建立各个层次数据库之间的关联关系,数据中心建立一套辅助数 据库,包括元数据、数据字典、系统日志、系统配置等信息,存储于大型关系数据库中(见图1) O3数据建库质量控制与措施城市地质数据建库的质量控制应贯穿从设计到验收的全过程,应在数据生产、 建库过程中严格执行“二级检查一级验收”制度。3. 1数据建库过程控制即采用过程方法对每一个过程的质量进行监管与分析和评价,以实现最大限度 的质量控制管理及持续改进。(1)在建库筹划阶段(P),依据工程目标,进行建库资源、技术
16、准备,包括 组建技术团队,收集相关法律法规、技术标准等文件资料,工程区钻 孔、地质图、剖面图、地形地貌等图件和遥感数据以及各类文档数据资料,配 备计算机及专业图形软件等;同时,认真组织编写,工程实施方案、开展数据库 设计并进行评审及改进。(2)在建库实施阶段(D),依据数据生产及质量控制流程实现数据库的建设 及质量控制,主要通过对数据库建设过程中的模型建立、图形及表类数据转换 入库等过程进行监管。通过识别各个过程的重要节点以及依存关系并进行检查 和控制,强调作业自检、互检及随检的工作方法,以实现质量目标。(3)工程检查与分析(C)贯穿于各过程重要节点,通过检查、评审等进行质量的分析与评价,实现
17、质量的控制和提升。(4)通过各个环节的检查及监控,进行有效改进,提高整个工程的效率和质 量,到达甚至超越质量目标(A) o3.2数据建库质量检查地质数据库建设过程中,需要对图形数字化、属性数据录入、坐标定位等三大 步骤进行质量控制。质量检查包括自检、互检和抽检3个层次。自检由作业者 在完成作业后自行检查,所有数据必须进行100%自检。对自检错误数、错误比 例、错误内容分别予以记录,对错误处自行修改。互检指由另一作业者对他人 完成的矢量化成果进行检查,互检比例为100%。互检者应在数据质量检查表中 写明错误内容、昔误数、错误比例等,并告知作业者让其对应修改。完成自 检、互检程序后,应交由第三者进
18、行抽检,抽检比例不得低于30%。3. 2. 1入库过程准确性检查数据入库的过程中为防止人为因素造成的错误,应编制相应的数据入库工具, 采用全自动或半自动的方式将数据导入数据库,保证入库过程的准确性。数据 入库后,采用自动或半自动的方式用软件再对数据库内数据进行全面的检查, 确保入库数据的一致性。4. 2. 2入库数据正确性检查表格数据由原始数据得来,由人工录入、数据转存等方式得到,为防止人为因 素导致的数据不准确,采用多种检查手段,如自检、小组互检、抽样检查、程 序检查。程序检查还可以对相关信息进行比拟检查,保证了资料的准确可靠;检 查并保证图元要素、属性数据和原始数据或成果数据资料一一对应;
19、保证属性及 表格数据的编码唯一且正确。数据正确性检查的内容包括图面质量检查、空间 数据质量检查、附表数据质量检查、资料文档检查、元数据检查等。5. 2. 3数据入库后的应用性检查数据导入数据库后,运用信息系统调用各专业的数据,抽取不少于20%的数据 进行专业计算、应用,检查数据在系统中的展示应用情况,保证数据准确可 靠。6. 2. 4数据检查工具通过总结数据库中存在问题或可能存在问题的类型和种类,采用专业数据检查 工具,包括钻孔位置检验、钻孔分层检验、钻孔编码检验、地质环境监测数据 检验等4结语城市地质数据建库是地质信息化建设的关键内容,其结构设计的规范性和先进 性决定了地质数据价值是否能够得到有效发挥。本文通过分析城市地质数据构 成及特点,开展了城市地质数据建库内容与结构设计,并针对性地探讨了数据 建库过程中的质量控制措施。Reference1潘宝玉,杨润书.浅论地质大数据的管理与利用J.地矿测绘,2017, 33 (1) : 1-3, 14.-2中国地质调查局.地质调查信息化“十三五”规划EB/OL. s: / cgs. gov. cn/xwl/ddyw/201711/120171109_443600. html.
限制150内