国土资源多源异构数据整合应用实例探讨课件.pptx

1、国土资源多源异构数据整合国土资源多源异构数据整合应用实例探讨应用实例探讨目录目录 1.目前国土数据存在的问题 2.国土多源异构数据整合的重要性 3.国土数据整合的内容 4.国土多源异构数据整合的解决方式 5.基于FME的国土多源异构数据整合方案目目前前国国土土数数据据存存在在的的问问题题当前国土资源信息化蓬勃发展，而各级国土资源信息化水平参差不齐，导致国土数据面临很多问题：数据分散、格式多样、通用性较差 数据更新周期较差，数据现势性较差 业务部门间分割严重，信息互通性较差数据质量 格式多样 坐标不统一 标准不统一数据更新 更新周期长 联动更新不及时数据共享与交换 业务数据库孤立存在 业务数据库

2、之间缺乏数据交换与共享机制目目前前国国土土数数据据存存在在的的问问题题主要表现为：国国土土多多源源异异构构数数据据整整合合的的重重要要性性(1)国土资源电子政务运行平台和系统需要统一的“国土资源数据库”作为数据支撑。(2)协调省市县各个部门之间的关系，使集成化国土资源基础数据库能够满足电子政务工程建设的需要。(3)形成统一的国土资源数据标准，提高国土资源数据管理的科学化、规范化，提高国土资源基础数据的社会效益和经济效益。(4)形成完善的国土资源数据信息共享、交换机制，加快国家、省、市等数据交换中心的建成。(5)构建国土资源指标监管体系，通过指标分析，展示国土资源现状、规划、保护和开发利用水平，

3、辅助领导决策。国国土土数数据据整整合合的的内内容容(1)建立和完善国土资源基础数据标准体系。(2)汇交各级基础数据资料，对分散的国土资源基础数据进行规范化和标准化处理，以及信息提取，实现多源、多格式、异构空间数据的转换。(4)建立面向国土电子政务信息共享的数据交换体系。(5)建立统一的国土资源空间数据库的管理和更新机制，实现数据入库、更新、备份和维护管理。(6)实现中心基础数据库与各业务系统数据库之间的交换共享关系；(7)建立国土资源指标监管体系，为政府提供国土资源信息的辅助决策支持和面向社会化信息服务。国国土土多多源源异异构构数数据据整整合合的的解解决决方方式式 1.直接进行空间数据交换，即

4、把一个系统的内部数据文件格式直接转换成另一个系统的内部数据文件格式；2.利用标准数据格式进行转换，如DXF、DLG等；3.建立开放式的共享空间文件格式，如中国地球空间数据交换格式(简称CNSDTF，标准编号：177981999)；4.空间数据互操作，利用“语义转换”，对空间数据进行整合。基基于于FME的的国国土土多多源源异异构构数数据据整整合合方方案案 1.国土数据建库质量检查方案国土数据建库质量检查方案 2.国土数据库更新维护方案国土数据库更新维护方案 3.其它国土方案其它国土方案国国土土数数据据建建库库质质量量检检查查方方案案 北京安图数码科技发展有限公司 v建库准备建库资源：1.源数据2

5、.源数据规则或规范3.数据库4.数据库结构或建库规范5.软硬件环境国国土土数数据据建建库库质质量量检检查查方方案案v源数据分析1.源数据采样分析2.数据库环境分析3.源数据规范与数据库规范的对比分析v源数据规则或规范 针对不同的数据建立不同的数据标准：例如，基础地理数据，土地利用规划等，形成对不同数据标准的检查和验收规范土地利用规划数据规范国国土土数数据据建建库库质质量量检检查查方方案案 数据检查细则国国土土数数据据建建库库质质量量检检查查方方案案国国土土数数据据建建库库质质量量检检查查方方案案v流程设计图源数据源数据规范检查规范检查入库操作入库操作数据库数据库数据纠错数据纠错通过通过未通过未

6、通过国国土土数数据据建建库库质质量量检检查查方方案案v流程设计图-检查规范规范检查检查完整性逻辑性图形规则属性规则业务规则数据目录结构正确性文件名称正确性数据要素分类是否准确数据现势性情况空间数据要素完整性属性必填字段元数据的完整性图形自身逻辑错误图形间的拓扑关系图属一致性检查接边检查接边检查上下级交互检查上下级交互检查值域、范围、规则检查值域、范围、规则检查属性字段结构国国土土数数据据建建库库质质量量检检查查方方案案v流程设计图-纠错几何有效性纠错 线面自交差 线面伪节点 面重叠、线重叠 面缝隙 图形的拓扑纠错 悬挂线 微小面处理 微短线处理 重复注记的叠加处理 国国土土数数据据建建库库质质

7、量量检检查查方方案案v流程设计图-入库入库入库操作操作数据字典要素分类要素接边图属关系数据字典自动关联要素自动分类分层要素自动分类分层要素自动接边要素自动接边图属自动重构图属自动重构国土数据建库质量检查方案国土数据建库质量检查方案 空间数据检查与验证空间数据检查与验证FME Workbench组件提供了超过400个不同类型的转换器。空间空间检查属性检查空空间间关关系系空空间间比比较较空空间间计计算算图图属属关关系系属属性性比比较较属性计算属属性性分分隔隔数据检查与验证数据检查与验证整体性检查完整性逻辑性自自动动修修正正目录结构文件名称要素分类坐坐标标系系统统元元数数据据空空间间结结构构字段结构

8、接接边边检检查查 检查模板的定义国土数据建库质量检查方案国土数据建库质量检查方案国土数据建库质量检查方案国土数据建库质量检查方案v方案内容基于FME的数据建库有两个模式：单机模式和在线模式单机模式：FME定制检查项，用户可以根据需要对所有的检查项进行单项检查、或者多项检查，另外为每类检查我们设置了参数控制。方便用户灵活的控制检查的精度、范围等信息。用户可以实现数据的批量入库操作，并在入库前或者入库后完成数据接边。应用案例：南京地籍数据数据在线检查、变更 重庆/成都国土局测绘数据流程化变更国土数据建库质量检查方案国土数据建库质量检查方案国土数据库更新维护方案国土数据库更新维护方案 FME数据库支

9、持数据库支持支持的常见数据库格式有：Oracle （None-Spatial&Spatial）MS Server（None-Spatial&Spatial）DB2 （None-Spatial&Spatial）ArcSDE （Raster&矢量）Mysql （None-Spatial&Spatial）MDB （None-Spatial&Spatial）技术特点如下：u支持空间数据的加载和迁移；u支持数据模型的重构和变换；u支持空间与非空间数据集成；u支持空间数据转换和变换；u支持坐标系统转换；u支持空间数据检查；u支持空间数据质量的保证与验证；国国土土数数据据库库更更新新维维护护方方案案v国土数

10、据库更新维护模式基于FME的数据库更新维护有两个模式：单机模式和在线模式在线模式：用户通过网络完成数据的上传、检查、入库整体操作。检查结果可以下载，可以查看，甚至定位。入库操作可以自动完成接边、要素分类分层、重构等操作。IntranetOrInternet国国土土数数据据库库更更新新维维护护方方案案数数据据更更新新基础库提取中心库基础库基础库提取提取基础库提取中心库基础库基础库数据库数据库增量包数据库数据库文件级主动更新被动更新增量更新全量更新国国土土数数据据库库更更新新维维护护方方案案 数据管理 增量数据的维护 历史数据的保存 数据仓库的ETL 多源异构数据的汇交和集成 应用案例：上海规划和

11、国土局数据仓库建设 成都国土一张图数据仓库建设国国土土数数据据库库更更新新维维护护方方案案应用案例应用案例上海空间数据仓库建设技术特点如下：u支持空间数据的加载和迁移；u支持数据模型的重构和变换；u支持空间与非空间数据集成；u支持空间数据转换和变换；u支持坐标系统转换；u支持空间数据检查；u支持空间数据质量的保证与验证；应用案例一应用案例上海空间数据仓库建设技术特点如下：u通过网络进行空间数据的实时分发；u支持分布式故障自动转移配置；u支持Oracle的西文到中文字符集转换；u对空间数据的服务提供日志记录；u提供实时空间数据交换服务；u支持海量空间数据的异构集成，支持实时、自动实现空间数据的动

12、态更新；应用案例二应用案例成都国土一张图一一张张图图建建设设的的关关键键技技术术v关键技术1.数据变化监测2.异构集成3.空间ETL一一张张图图建建设设的的关关键键技技术术v数据变化监测1.基于商业数据库的现有工具Oracle CDC/Streaming GoldenGate2.一般的触发器/存储过程3.全记录集比对一一张张图图建建设设的的关关键键技技术术v异构数据集成一一张张图图建建设设的的关关键键技技术术v异构数据集成一一张张图图建建设设的的关关键键技技术术v空间ETL-国土监管指标的抽取一一张张图图建建设设的的关关键键技技术术v空间ETL-国土监管指标的抽取数据交换和共享数据交换和共享其它解决方案数据上传数据下载任务提交数据流传输OGC标准邮件服务FME Server服务国土资源数据中心库 其他新技术的应用 3D pdf展示三维数据 基于Google Earth的数据动态展示 多源数据的快速三维建立 应用案例：3D Pdf数据展示 Google earth 点云、影像、矢量快速建模其它解决方案3D数据