国土资源多源异构数据整合应用实例探讨.pptx

国土资源多源异构数据整合应用实例探讨,北京世纪安图数码科技发展有限责任公司2012年11月,目录,1.目前国土数据存在的问题2.国土多源异构数据整合的重要性3.国土数据整合的内容4.国土多源异构数据整合的解决方式5.基于FME的国土多源异构数据整合方案,目前国土数据存在的问题,当前国土资源信息化蓬勃发展，而各级国土资源信息化水平参差不齐，导致国土数据面临很多问题：数据分散、格式多样、通用性较差数据更新周期较差，数据现势性较差业务部门间分割严重，信息互通性较差,数据质量格式多样坐标不统一标准不统一数据更新更新周期长联动更新不及时数据共享与交换业务数据库孤立存在业务数据库之间缺乏数据交换与共享机制,目前国土数据存在的问题,主要表现为：,国土多源异构数据整合的重要性,(1)国土资源电子政务运行平台和系统需要统一的“国土资源数据库”作为数据支撑。(2)协调省市县各个部门之间的关系，使集成化国土资源基础数据库能够满足电子政务工程建设的需要。(3)形成统一的国土资源数据标准，提高国土资源数据管理的科学化、规范化，提高国土资源基础数据的社会效益和经济效益。(4)形成完善的国土资源数据信息共享、交换机制，加快国家、省、市等数据交换中心的建成。(5)构建国土资源指标监管体系，通过指标分析，展示国土资源现状、规划、保护和开发利用水平，辅助领导决策。,国土数据整合的内容,(1)建立和完善国土资源基础数据标准体系。(2)汇交各级基础数据资料，对分散的国土资源基础数据进行规范化和标准化处理，以及信息提取，实现多源、多格式、异构空间数据的转换。(4)建立面向国土电子政务信息共享的数据交换体系。(5)建立统一的国土资源空间数据库的管理和更新机制，实现数据入库、更新、备份和维护管理。(6)实现中心基础数据库与各业务系统数据库之间的交换共享关系；(7)建立国土资源指标监管体系，为政府提供国土资源信息的辅助决策支持和面向社会化信息服务。,国土多源异构数据整合的解决方式,1.直接进行空间数据交换，即把一个系统的内部数据文件格式直接转换成另一个系统的内部数据文件格式；2.利用标准数据格式进行转换，如DXF、DLG等；3.建立开放式的共享空间文件格式，如中国地球空间数据交换格式(简称CNSDTF，标准编号：177981999)；4.空间数据互操作，利用“语义转换”，对空间数据进行整合。,基于FME的国土多源异构数据整合方案,1.国土数据建库质量检查方案2.国土数据库更新维护方案3.其它国土方案,国土数据建库质量检查方案,北京安图数码科技发展有限公司,建库准备,建库资源：源数据源数据规则或规范数据库数据库结构或建库规范软硬件环境,国土数据建库质量检查方案,源数据分析,源数据采样分析数据库环境分析源数据规范与数据库规范的对比分析,源数据规则或规范针对不同的数据建立不同的数据标准：例如，基础地理数据，土地利用规划等，形成对不同数据标准的检查和验收规范土地利用规划数据规范,国土数据建库质量检查方案,数据检查细则,国土数据建库质量检查方案,国土数据建库质量检查方案,流程设计图,源数据,规范检查,入库操作,数据库,数据纠错,通过,未通过,国土数据建库质量检查方案,流程设计图-检查,数据目录结构正确性,文件名称正确性,数据要素分类是否准确,数据现势性情况,空间数据要素完整性,属性必填字段,元数据的完整性,图形自身逻辑错误,图形间的拓扑关系,图属一致性检查,接边检查,上下级交互检查,值域、范围、规则检查,属性字段结构,国土数据建库质量检查方案,流程设计图-纠错,国土数据建库质量检查方案,流程设计图-入库,数据字典自动关联,要素自动分类分层,要素自动接边,图属自动重构,国土数据建库质量检查方案,空间数据检查与验证,FMEWorkbench组件提供了超过400个不同类型的转换器。,空间检查,属性检查,空间关系,空间比较,空间计算,图属关系,属性比较,属性计算,属性分隔,数据检查与验证,整体性检查,完整性逻辑性,自动修正,目录结构,文件名称,要素分类,坐标系统,元数据,空间结构,字段结构,接边检查,检查模板的定义,国土数据建库质量检查方案,国土数据建库质量检查方案,方案内容,基于FME的数据建库有两个模式：单机模式和在线模式,单机模式：FME定制检查项，用户可以根据需要对所有的检查项进行单项检查、或者多项检查，另外为每类检查我们设置了参数控制。方便用户灵活的控制检查的精度、范围等信息。用户可以实现数据的批量入库操作，并在入库前或者入库后完成数据接边。,应用案例：南京地籍数据数据在线检查、变更重庆/成都国土局测绘数据流程化变更,国土数据建库质量检查方案,国土数据库更新维护方案,FME数据库支持,支持的常见数据库格式有：Oracle（None-Spatial&Spatial）MSServer（None-Spatial&Spatial）DB2（None-Spatial&Spatial）ArcSDE（Raster&矢量）Mysql（None-Spatial&Spatial）MDB（None-Spatial&Spatial）,技术特点如下：支持空间数据的加载和迁移；支持数据模型的重构和变换；支持空间与非空间数据集成；支持空间数据转换和变换；支持坐标系统转换；支持空间数据检查；支持空间数据质量的保证与验证；,国土数据库更新维护方案,国土数据库更新维护模式,基于FME的数据库更新维护有两个模式：单机模式和在线模式,在线模式：用户通过网络完成数据的上传、检查、入库整体操作。检查结果可以下载，可以查看，甚至定位。入库操作可以自动完成接边、要素分类分层、重构等操作。,IntranetOrInternet,国土数据库更新维护方案,数据更新,主动更新,被动更新,增量更新,全量更新,国土数据库更新维护方案,数据管理增量数据的维护历史数据的保存数据仓库的ETL多源异构数据的汇交和集成应用案例：上海规划和国土局数据仓库建设成都国土一张图数据仓库建设,国土数据库更新维护方案,应用案例,应用案例上海空间数据仓库建设,技术特点如下：支持空间数据的加载和迁移；支持数据模型的重构和变换；支持空间与非空间数据集成；支持空间数据转换和变换；支持坐标系统转换；支持空间数据检查；支持空间数据质量的保证与验证；,应用案例一,应用案例上海空间数据仓库建设,技术特点如下：通过网络进行空间数据的实时分发；支持分布式故障自动转移配置；支持Oracle的西文到中文字符集转换；对空间数据的服务提供日志记录；提供实时空间数据交换服务；支持海量空间数据的异构集成，支持实时、自动实现空间数据的动态更新；,应用案例二,应用案例成都国土一张图,一张图建设的关键技术,关键技术,数据变化监测异构集成空间ETL,一张图建设的关键技术,数据变化监测,基于商业数据库的现有工具OracleCDC/StreamingGoldenGate一般的触发器/存储过程全记录集比对,一张图建设的关键技术,异构数据集成,一张图建设的关键技术,异构数据集成,一张图建设的关键技术,空间ETL-国土监管指标的抽取,一张图建设的关键技术,空间ETL-国土监管指标的抽取,数据交换和共享,其它解决方案,FMEServer服务,国土资源数据中心库,其他新技术的应用3Dpdf展示三维数据基于GoogleEarth的数据动态展示多源数据的快速三维建立应用案例：3DPdf数据展示Googleearth点云、影像、矢量快速建模,其它解决方案,3D数据,谢谢！欢迎各位领导、专家指正,