基于FME的地理信息共享应用研究课件.pptx

1、基于基于FME的地理信息共享研的地理信息共享研究究上海市空间资源数据体系建设 和共享现状1交交 流流 内内 容容2 基于FME的地理信息共享云服务基于FME的POI信息融合3地理信息变化检测研究4人口人口库库法人法人库库空间地理库空间地理库“加强政务数据资源共享，以人口、法人、空间地理三大数据库为基础，加快汇聚共享 各类数据资源，深化政务数据资源目录体系建设。”-上海国民经济和社会发展“十三五”规划纲要上海市上海市“三大库三大库”建设建设空间地理空间地理 数据资源数据资源地理地理国情国情数数据库据库应用的核心就是数据应用的核心就是数据比例尺图幅数1:500105761:1000135161:2

2、0009672(5667)1:10000453地理数据库建设情况地理数据库建设情况地理数据库建设情况地理数据库建设情况航空遥感影像航空遥感影像卫星遥感影像卫星遥感影像无人机遥感影像无人机遥感影像历史影像历史影像-城市发展的真实见证城市发展的真实见证历史影像历史影像-城市发展的真实见证城市发展的真实见证满足社会需求的专题信息满足社会需求的专题信息0万条地址门牌数据条历史地名数据沿街门牌沿街门牌农村地区农村地区小区内部小区内部地址匹配技术是地理空间信息与社会经济信息 快速整合集成的重要手段，通过地址数据库建设与 匹配引擎开发，可为社会经济信息空间化及政务信 息资源共享提供支撑。满足社会需求的专题信

3、息满足社会需求的专题信息利用地址数据库以及地址匹配技术为上海市规土、公安、卫生、工 商、科委、统计等近20个政府部门进行数据空间定位服务近600万万条，其 中法人库将近400万万条。地址库地址库满足社会需求的专题信息满足社会需求的专题信息动态更新 数据入库 方案比较 量测分析要素分层 制作分级 地上地下 位置精确直观的三维地理信息直观的三维地理信息丰富的地理国情普查和丰富的地理国情普查和监监测信息测信息地理信息公共服务地理信息共享与交换上海市地理信息公共服上海市地理信息公共服务务平台平台的的作用作用日日益益凸凸显显服务于政府机关、企事业单位，公众服务等行业，现已有政务注册用户44家，公众注册用

4、 户750家上海市地理信息公共 服务平台上海市消防GIS平台上海市第一次地理国 情普查上海市第三次经济普 查12345市民热线应急避险和疏散安置上海市多灾种风险地 图户外广告监查管理系 统不可移动文物管理系 统三维规划审批平台水务公共信息平台违法用地在线遥感监 查系统上海市规划和国土资 源管理媒体报道支撑系统浦东新区农用地核查 移动平台崇明地理信息共享平 台岳阳街道三维信息管 理系统宝山工业园三维地理 信息系统“中国上海”网上政 务大厅上海红色地图上海共青团地理信息上海优秀历史建筑物 信息无障碍设施分布图上海市浦东新区规土 局电子地图上海早餐地图城市规划多元信息移 动采集农用地核查系统物业管理

5、中心浦东公安局上海市政务数据资源共享上海市政务数据资源共享面对日益增加的空间数据提取和转换的需求，如何进行便捷的信息共享？1数据库越来越大数据库越来越大数据提取挖掘 越来越繁琐面临的问题面临的问题全要素更新不够灵活,未来的数据更新模式是面向对象的地理要素更新2目前上海市的全要素地形数据更新周期较为固定。对变化频率快的数据，更新周期不能满足要求（如兴趣点、导航库、交通 信息等数据）；对变化频率慢的数据，更新周期又出现了冗余?如何快速把更新信息反应到公开版地图的制作上；数据来源增多，这些不定期数据将如何纳入更新？地理国情监测，各种数据按各自周期汇总，如何快速检测变化、更新？面临的问题面临的问题 人

6、工检测对于同样区域，无论变化大小检测量是一样的；道路、交通信息等数据变化快，但变化量小，检测依然需要大量人工；门址库数据量巨大，变化检测不仅检查空间点的变化，还需要和其他 地物之间关系保持正确；影像、DSM以及国情普查、监测的数据缺乏挖掘和利用；地理国情普查和监测的数据来源广、间隔周期短，要求变化检测和更 新必须快速。进行自动变化检测，加快变化区域发现的速度，为数据挖掘统计打基础面临的问题面临的问题跨行业三维空间信息的应用3面临的问题面临的问题适应性适应性 多种类空间数据格式支持-不同坐标系，不同文件格式 数据规则可定制-不同区域不同比例需要灵活的参数 大数据的支持 能够直接连接大型数据库进行

7、ETL过程 低耦合架构，能够和其他业务、监控引擎融为一体开放性开放性 具备丰富的二次开发接口，能在环境下定制开发 开发成本低，后期维护成本低 易用性高，有完善的开发帮助和技术支持 基于标准的开放式架构，提供WEB服务进行空间数据ETL过程技术选型原则技术选型原则FME-地理信息地理信息平平台的台的ETL引擎引擎基于服务基于服务SOA构架可扩展的空间数据构架可扩展的空间数据ETL服务平服务平台台A Spatial ETL toolExtract 从指定的数据库读取数据Transform 将获得的数据转换为目标数据库需要的结构Load 将结果数据写入目标数据库采用B/S架构，实现在线处理利用服务器

8、架构任务执行引擎支持多种WEB Service 协议使用任何支持格式发布数据支持分布式故障自动转移配置技术选型原则技术选型原则CustomCustom FormatFormat自自定定义义M MD DO OArcGIS ArcGIS Oracle Oracle SpatialSpatial坐坐标标系变换系变换CustomCustom TransformerTransformerFME Desktop/FME ServerC CA AD DD Da at ta ababas se e 通过C+或java，实现FMEPlugin定义的数据格式（Format）或者转换器接口（Transformer）

9、，编译为dll或jar拷贝到FME的指定目录下，集 成到FME Server和FMEDesktop环境中，实现和FME已 有功能和数据格式的相互调用和 转换。FME Plugin 技术技术1、基于、基于FME的地的地理理信息信息共共享云享云服服务务1、基于、基于FME的地的地理理信息信息共共享云享云服服务务全面的地理信息提取、转换服全面的地理信息提取、转换服务务1、基于、基于FME的地的地理理信息信息共共享云享云服服务务 FME支持60种格式栅格格式，可以实 现最流行的栅格格式GeoTIFF/TIFF、ECW的转换。重采样经常用于生成更小的图片，像 重采样到想要的行/列尺寸、像元大小 (cel

10、l spacing)或原始大小的某个比 例。，常用的插值方法包括最近邻插 值，双三次插值，双线性插值等。遥感影像在线服务遥感影像在线服务-格 式 转 换，格 式 转 换，重 采 样重 采 样1、基于、基于FME的地的地理理信息信息共共享云享云服服务务遥感影像在线服务遥感影像在线服务-坐 标 转 换坐 标 转 换和 合 成和 合 成1、基于、基于FME的地的地理理信息信息共共享云享云服服务务BIM、FME、三维地图、三维地图1、基于、基于FME的地的地理理信息信息共共享云享云服服务务通过实现OneMap服务引擎 开发接口，自定义FME服务 引擎，OneMap 通过FME服 务引擎发现并管理FME

11、Server提供的服务。OneMap FME服务引擎技术OneMapFME ServicesOneMap Service Engine InterfaceFME ServerFME Service Engine与与OneMap的结合的结合1、基于、基于FME的地的地理理信息信息共共享云享云服服务务与与OneMap的结合的结合1、基于、基于FME的地的地理理信息信息共共享云享云服服务务OneMap FME服务引擎技术0406010203POI母库母库形成门址库门址库POI信息信息地形库地形库POI信息信息公开版公开版POI，国情，国情POI、百度、百度POI消防消防POI气象气象POI交通交通P

12、OI操作（增、删、改）052、基于、基于FME的的POI信信息息融合融合2、基于、基于FME的的POI信信息息融合融合2、基于、基于FME的的POI信信息息融合融合母库母库 建立建立POI融合融合门址门址 挂接挂接应用应用 模式模式1.确定确定POI标准结构，建立母库。标准结构，建立母库。POI数据来源丰富，进行属性拆分、字段合 并、关系映射等操作，最终形成标准POI数 据属性结构并建立母库。2.基于空间和属性信息的基于空间和属性信息的POI融合融合对其他来源的POI数据，利用FME工具进行空间距离和属性相似 度的判断，将在阈值范围内的POI数据融合到POI母库中，形成 新的POI融合库，同时

13、建立元数据。3.建立建立POI数据与门址数据的关联关系数据与门址数据的关联关系利用FME工具，借助于建筑面、道路面、小区面等辅 助信息，进行POI信息与门址信息的逻辑最近判断，建立POI数据与门址数据的一对一以及一对多关系，为POI数据和门址数据的联合应用提供技术性支撑。4.POI库的深化应用模式探讨库的深化应用模式探讨将形成的POI融合库应用于上海市地 理信息公共服务平台等方面。2、基于、基于FME的的POI信信息息融合融合基于基于FME的的POI融合模板实现融合模板实现2、基于、基于FME的的POI信信息息融合融合基于矢量数据的地理信息变化检测空间变化内容点要素-移动、新生、消亡变化检测算

14、法线要素-延长、缩短、变形、移动、新生、消亡、合并、分裂、混合分并 面要素-扩大、缩小、变形、移动、新生、消亡、合并、分裂、混合分并进行变化检测的数据位于同一坐标参考空间，并且地理编码相同，使之能够进行叠加分析3、地理信息变化检测研究、地理信息变化检测研究点要素变化检测 点状要素的变化检测以两个不同时相的点数据为目 标，查找其在容差范围内是否存在对应的数据。空间上有对应的数据且属性一致则为未发生变化的点，属性不一致则为属性变化点；空间上不同却属性相同的数据，则认为该数据发生了空间上的变化；如果空间上和属性上均无对应数据，则认为该数据 发生了新增或删除。对于变化的点输出图形变化轨迹线3、地理信息

15、变化检测研究、地理信息变化检测研究线要素变化检测 根据设定阈值，通过比较线要素节点的方式，对线要素空间形态进行比较，并辅以属性变化 检测，最终将检测结果予以输出。根据需求不同，公开版数据结果分为“新增、删除、属性变化、位置变化前、位置变化后”五种；基础库结果分为“新增、删除、属性变 化”三种；针对导航数据，在基础库的基础上，增加“方向变化前、方向变化后”两种。不影响线形态变化的节点增删不影响检测结果。3、地理信息变化检测研究、地理信息变化检测研究面要素变化检测 根据设定阈值，通过比较面要素节点，对面要素空间形态进行比较，并辅以属 性变化检测，最终将检测结果予以输出。根据需求不同，公开版数据结果

16、分为“新增、删除、属性变化、位置变化前、位置变化后”五种；基础库结果分为“新增、删除、属性变化”三种；不影响面形态变化的节点增删不影响检 测结果3、地理信息变化检测研究、地理信息变化检测研究直接利用FME模板构建 搭建了面向5种类型数据格式、15个FME模板。充分 体现了FME对上百种格式的数据相互转换的优势。平均每个模板20多个转换器。发挥了强大的语义转 换功能。FME具有丰富的数据建模功能，能准确地 重构数据模式，在数据转换的过程中对数据进行多方 面的综合处理，使得数据转换在保证无损的同时，扩 大信息量。直接连接数据库进行大数据操作。发挥了FME对多 种数据库的支持以及大数据批量处理的优势

17、。几乎为零的代码实现，仅有少许代码完成界面的封装 检测结果输出支持多格式可视化。序号转换器名称说明1AttributeCreator创建一个新的属性2ParameterFetcher获取参数值3Tester按照条件过滤（数据分流）4NeighborFinder按照空间距离查找数据（临近分析）5ListSorter列表排序6PythonCaller嵌入 Python 脚本7Matcher数据每一个要素之间进行空间和属性上的匹配8CoordinateExtractor提取要素节点的坐标值9FeatureMerger按照某一属性进行匹配，从而传递其他属性10ListExploder列表炸开，将列表属

18、炸散成普通属性，同时要素按照列表数变为多个11StatisticsCalculator统计每类变化的个数12ListRangeExtractor提取列表的最大最小值13AttributeRemover删除属性14ListSearcher查找列表中是否包含某个值15ListIndexer将某个列表降级成主属性16LineOnLineOverlayer进行线线叠加分析17Snapper进行线线或者面面之间的捕捉18ListElementCounter计算列表的元素数量19AreaOnAreaOverlayer进行面面叠加分析20AttributeExposer对数据的格式属性进行暴漏。21Boun

19、dsExtractor提取图版的四至即外接多边形的角点坐标22WorkspaceRunner在工作空间中运行另外一个工作空间3、地理信息变化检测研究、地理信息变化检测研究可定制的参数化设计3、地理信息变化检测研究、地理信息变化检测研究封装模板开发界面友好实用的操作工具3、地理信息变化检测研究、地理信息变化检测研究2014201420152015新新 增增消消 失失移移 动动3、地理信息变化检测研究、地理信息变化检测研究前时相后时相新新 增增消消 失失属属 性性 变变 化化3、地理信息变化检测研究、地理信息变化检测研究批量或单个批量或单个格式格式几何类型图层几何类型图层记录数（两个记录数（两个时

20、时相相）耗时耗时mdbROAD_POLYGON道路面35万20分mdbr2012道路线40万7分大数据量（多个大数据量（多个 范围）范围）mdbDoorplate点350万1时43分oracleBuilding面755万3时26分oracleDoorplate点380万2小时oracleROAD_CENTER_LINE线198万50分mdbROAD_POLYGON道路面1.2万1分19秒mdbr2012道路线650040秒小数据量（单个小数据量（单个 范围）范围）mdbDoorplate点13万11分oracleBuilding面8.5万5分20秒oracleDoorplate点2万1分ora

21、cleROAD_CENTER_LINE线3万2分效率措施 对于全市区域的变化检测，可 以设定比对区域分批进行。通 过范围选取，减少每次读取的 数据。在具体运行过程中使用FME转 换器 WorkspaceRunner 进行 多线程并行处理。单机使用存在内存不足等问题，需要通过集群方式多机解决。3、地理信息变化检测研究、地理信息变化检测研究FME Transformation 为公共服务平台提供为公共服务平台提供核核心技心技术术支撑支撑前景展望前景展望010203时空信息服务时空信息服务面向更多用户全面提升测绘服务水平、拓展应用领域拓展应用领域拓展应用领域更好地服务政府管理,更好地服务智慧城市 更好地服务企业发展,更好地服务社会民生 更好地服务城市安全丰富空间资源丰富空间资源更多的地理要素,更多的历史数据 更多的三维数据,更多的市情数据更多的卫星数据提升服务能力提升服务能力更科学精准的定位服务 更强大的数据在线分析能力 更多的移动平台应用欢欢 迎迎 批批 评评 指指 正正 谢谢 谢谢!