
FME空间数据检查解决方案.doc
6页安图FME数据检查解决方案安图基于FME数据检查方案,已有上海、南京、杭州、四川、重庆、青岛等多个成熟的省市的经验累积其中不乏有规划专题数据、地形数据、地籍数据及其他测绘类数据格式其中数据检查支持以交互式、批量进行,支持多用户并行检查;基于检查的内容和结果,形成内容清晰、易于错误定位、提供一定错误修正指导的检查报告和部分统计评价结果一、基于FME的数据检查特点l 支持的数据格式多样l 检查模式灵活l 功能定制快速、高效l 多样的参数化控制l 后期维护成本低l 支持二次开发二、利用FME的数据检查形式基于FME的检查形式分2大类:l Web检查 l 单机版检查三、利用FME的数据检查结果利用FME的数据检查结果,也分为两类:l 标示型结果在图形上进行标示,或者将错误数据拷贝到指定文件或者图层中参考图如下:l 统计型结果数据批量运行检查,或者数据进行数十种检查内容时,fme支持将输出如excel表格格式的检查结果统计报表,或者辅助完成数据的质量等级评定工作统计型参考图如下:四、检查内容总结综合多个项目的检查实例,总结常用的检查项如下:(1) 整体完整性检查 根据数据库设计及数据的特点,检查数据的目录组织结构、文件命名、数据分层是否正确或是否符合入库要求;数据现势性是否符合要求,数据源时点和数据完成时点是否符合要求。
检查不同比例尺空间数据坐标系是否符合相关要求;投影方式的选择及参数的设置是否正确检查相邻分幅的同一数据层实体的接边精度是否符合要求,行政界线接边要以民政勘界成果为基础,要求边界不重不漏,低精度数据应服从高精度数据系统还应支持对各级接边质量进行检查,保证各级接边质量 检查的内容包括:l 数据目录结构正确性l 文件命名正确性l 数据要素分类分层是否完整(所有要素都要有要素编码)l 数据现势性情况l 坐标系是否符合空间数据库要求l 空间图形与行政界线的重合性(2) 标准正确性检查 检查不同粒度数据的地理覆盖范围是否完整、无遗漏;表格数据是否无遗漏和无多余;元数据是否无遗漏和无多余检查必填数据项不能是否为空值;文本数据是否符合相关要求 检查内容包括:l 要素图层编码的正确性l 要素编码与图层关系的正确性l 要素的属性结构的正确性l 图形范围正确性(如:地形图中所有要素都必须在图廓中)l 元数据的正确性l 其他文本数据的完整性 (3) 图形逻辑一致性检查 检查空间数据要素分层(如要素层名称和几何特征)、属性(表格)、元数据的数据结构(如表名、字段长度、字段类型和约束条件等)是否与“一张图”数据库标准保持一致。
检查是否按要求建立拓扑关系,建立的拓扑关系是否正确,如多边形封闭、不存在多余标识点、悬挂节点、坐标点重叠、线和弧段自相交等现象 检查内容包括:l 入库数据的结构是否符合数据库结构l 空间图形数据的逻辑一致性l 点线面各类要素自身的几何拓扑错误检查l 面闭合性l 微短线检查l 悬挂线检查l 微小面检查l 悬挂节点的合理性l 坐标点是否重合l 线、面自交叉l 洞、岛要素的合理性l 要素的几何参数检查(如:颜色、线型、符号、角度等)l 空间图形要素间的几何拓扑逻辑关系(如:面线相交压盖检查、边线与面套合、缝隙检查) (4) 属性数据检查 检查数据值及其单位的正确性 检查内容包括:l 值域范围检查l 测量单位合理性检查l 输入值是否符合数据字典l 属性数据必填字段完整性 (5) 基于数据专题的图属一致性检查 基于数据专题的检查,主要是针对不同类型的数据都会存在不同的需求,例如:规划数据就需要就需要对空间数据与属性表格进行逻辑关系判断;地形图数据就涉及到图幅的接边检查 检查内容包括:l 存在接边情况的空间数据的接边检查(拼接检查)l 空间数据与非空间数据一致性(图属一致)检查l 交互(上下级空间位置检查)检查l 图属基于业务关系进行的汇总分析与比较检查 五、对错误数据的自动修正 对于可通过自动修正方式进行修复的数据,在检查过程中应尽量通过FME的函数进行自动修复,避免人工干预的工作量。
检查和修正内容:l 空间图形逻辑自修复l 重复点去除l 空间图形缝隙去除l 碎面的自动合并l 面的自动闭合处理l 方向线的转向操作 六、检查日志的管理 对于检查过的数据,需要有日志输出,管理人员通过日志能够快速定位到错误数据,进行错误数据的修正 检查日志需求:l 入库数据量统计l 读入数据和输出数据对比l 入库完成时间记录l 错误数据的准确标识l 错误类型的准确描述l 出现错误,日志自动提示。
