空间数据仓库与数据挖掘课件.ppt
- 【下载声明】
1. 本站全部试题类文档,若标题没写含答案,则无答案;标题注明含答案的文档,主观题也可能无答案。请谨慎下单,一旦售出,不予退换。
2. 本站全部PPT文档均不含视频和音频,PPT中出现的音频或视频标识(或文字)仅表示流程,实际无音频或视频文件。请谨慎下单,一旦售出,不予退换。
3. 本页资料《空间数据仓库与数据挖掘课件.ppt》由用户(三亚风情)主动上传,其收益全归该用户。163文库仅提供信息存储空间,仅对该用户上传内容的表现方式做保护处理,对上传内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知163文库(点击联系客服),我们立即给予删除!
4. 请根据预览情况,自愿下载本文。本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
5. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007及以上版本和PDF阅读器,压缩文件请下载最新的WinRAR软件解压。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 空间 数据仓库 数据 挖掘 课件
- 资源描述:
-
1、第第10章章_空间数据仓库与空间数据仓库与数据挖掘数据挖掘2022-8-15第10章空间数据仓库与数据挖掘第1页,共83页。第十章第十章空间数据仓库空间数据仓库和数据挖掘和数据挖掘第10章空间数据仓库与数据挖掘第2页,共83页。数据仓库和空间数据仓库数据仓库和空间数据仓库 空间信息基础设施空间信息基础设施 数据挖掘和空间数据挖掘数据挖掘和空间数据挖掘 主要内容:第10章空间数据仓库与数据挖掘第3页,共83页。10.1 10.1 数据仓数据仓库与空间数据库与空间数据仓库仓库 数据仓库数据仓库 空间数据仓库空间数据仓库第10章空间数据仓库与数据挖掘第4页,共83页。10.1 10.1 数据仓库与空
2、间数据仓库数据仓库与空间数据仓库 随着市场竞争的加剧和信息社会需求的发展,出现了随着市场竞争的加剧和信息社会需求的发展,出现了数数据集中化据集中化、业务综合化业务综合化、决策科学化决策科学化的趋势。伴随这种的趋势。伴随这种数据信息化的趋势,从大量数据中提取数据信息化的趋势,从大量数据中提取(检索、查询等检索、查询等)制制定市场策略的信息就显得越来越重要了。这种需求既要求定市场策略的信息就显得越来越重要了。这种需求既要求联机服务,又涉及大量用于决策的数据,而传统的数据库联机服务,又涉及大量用于决策的数据,而传统的数据库系统已无法满足这种需求。系统已无法满足这种需求。一、数据仓库一、数据仓库第10
3、章空间数据仓库与数据挖掘第5页,共83页。历史数据量很大;历史数据量很大;辅助决策信息涉及许多部门的数据,而不同系统的辅助决策信息涉及许多部门的数据,而不同系统的数据难以集成;数据难以集成;由于访问数据的能力不足,它对大量数据的访问性由于访问数据的能力不足,它对大量数据的访问性能明显下降。能明显下降。10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库一、数据仓库一、数据仓库无法满足的需求具体体现在三个方面:无法满足的需求具体体现在三个方面:第10章空间数据仓库与数据挖掘第6页,共83页。随着随着C/SC/S技术的成熟和并行数据库的发展,信息处技术的成熟和并行数据库的发展,信息处理
4、技术的发展趋势是从大量的事务数据库中抽取数据,并理技术的发展趋势是从大量的事务数据库中抽取数据,并将其清理、转换为新的存储格式,即为决策目标把数据聚将其清理、转换为新的存储格式,即为决策目标把数据聚合在一种特殊的格式中。随着此过程的发展和完善,这种合在一种特殊的格式中。随着此过程的发展和完善,这种支持决策的、特殊的数据存储即被称为数据仓库支持决策的、特殊的数据存储即被称为数据仓库(Data(Data WarehouseWarehouse,DW)DW)。v 数据仓库产生趋势数据仓库产生趋势10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第7页,共83
5、页。数据仓库数据仓库(Data Warehouse,(Data Warehouse,简称简称DW)DW)是是支持管支持管理决策过程的理决策过程的、面向主题的面向主题的、集成的集成的、稳定的稳定的、不同不同时间的时间的数据集合。数据集合。主题是数据归类的标准,每个主题对应一个客观分析主题是数据归类的标准,每个主题对应一个客观分析领域,如客户、商店等,它可为辅助决策集成多个部领域,如客户、商店等,它可为辅助决策集成多个部门不同系统的大量数据。门不同系统的大量数据。数据仓库包含了大量历史数据,经集成后进入数据仓库的数据仓库包含了大量历史数据,经集成后进入数据仓库的数据是极少更新的。数据仓库内的数据时
6、限为数据是极少更新的。数据仓库内的数据时限为5 5至至1010年,年,主要用于进行时间趋势分析。主要用于进行时间趋势分析。v 数据仓库定义数据仓库定义10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第8页,共83页。数据仓库的数据量很大,一般为数据仓库的数据量很大,一般为10GB10GB左右。它左右。它是一般数据库是一般数据库 (100MB)(100MB)数据量的数据量的100100倍,大型数倍,大型数据仓库达到据仓库达到TBTB级。级。v 数据仓库定义数据仓库定义10.1 10.1 数据仓库与空间数据数据仓库与空间数据仓库仓库 数据仓库是一种分析
7、型环境,它与一般的数据仓库是一种分析型环境,它与一般的DBMSDBMS的操的操作型环境是不同的,两者的比较有利于对数据仓库的理解作型环境是不同的,两者的比较有利于对数据仓库的理解。第10章空间数据仓库与数据挖掘第9页,共83页。10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库数据仓库(数据仓库(DWDW)数据库(数据库(DBDB)分析型数据环境分析型数据环境操作型数据环境操作型数据环境面向分析(主题),支持面向分析(主题),支持DSSDSS面向业务,日常事务处理面向业务,日常事务处理集成的综合数据集成的综合数据非集成或者集成程度很低,非集成或者集成程度很低,主要是明细数据主要是
8、明细数据历史数据(历史数据(5-105-10年)年)主要关心当前数据(主要关心当前数据(60-9060-90天)天)定期加载,加载后极少更新定期加载,加载后极少更新实时更新实时更新数据驱动的开发周期数据驱动的开发周期(CLDSCLDS)需求驱动的开发周期需求驱动的开发周期(SDLCSDLC)第10章空间数据仓库与数据挖掘第10页,共83页。数据仓库主要应用在两个方面:数据仓库主要应用在两个方面:使用浏览分析工具在使用浏览分析工具在DWDW中寻找有用的信息。中寻找有用的信息。数据仓库系统支持在数据仓库系统支持在DWDW上的应用,形成决策支持上的应用,形成决策支持系统系统 (DSS)(DSS)。v
9、 数据仓库应用数据仓库应用10.1 10.1 数据仓库与空间数据数据仓库与空间数据仓库仓库第10章空间数据仓库与数据挖掘第11页,共83页。地球是一个复杂多变的系统,传统地学的各个学科由于自身的局地球是一个复杂多变的系统,传统地学的各个学科由于自身的局限,其研究范围已无法适应全球变化和区域可持续发展的要求。限,其研究范围已无法适应全球变化和区域可持续发展的要求。如在交通规划中,往往需要使用大量历史的、现实的空间数据以如在交通规划中,往往需要使用大量历史的、现实的空间数据以及各应用领域的复杂数据进行数据分析,涉及多维数据视图的概及各应用领域的复杂数据进行数据分析,涉及多维数据视图的概念,仅靠关系
10、数据库就将难以解决。念,仅靠关系数据库就将难以解决。同时,传统的同时,传统的GISGIS应用系统是面向应用、事务驱动的,其中分应用系统是面向应用、事务驱动的,其中分析所需要的主题相当分散,不同的操作平台和数据标准使得析所需要的主题相当分散,不同的操作平台和数据标准使得决策支持系统几乎无法实现数据共享。为此,必须通过大型决策支持系统几乎无法实现数据共享。为此,必须通过大型的、多维化的数据库系统进行统一的组织、管理的、多维化的数据库系统进行统一的组织、管理 。二、空间数据仓库二、空间数据仓库10.1 10.1 数据仓库与空间数据数据仓库与空间数据仓库仓库v 空间数据仓库的产生趋势空间数据仓库的产生
11、趋势第10章空间数据仓库与数据挖掘第12页,共83页。数据仓库正是这样一种数据的存储系统,它提供了来自数据仓库正是这样一种数据的存储系统,它提供了来自异地、异构、种类不同异地、异构、种类不同的应用系统的集成化和历史化的数据。的应用系统的集成化和历史化的数据。对其加工后,在数据仓库中存储、提取和维护,灵活地重对其加工后,在数据仓库中存储、提取和维护,灵活地重组数据,呈现出多维数据视图,并且面向复杂的数据分析组数据,呈现出多维数据视图,并且面向复杂的数据分析及高层的决策支持,从而为有关部门或企业进行全局范围及高层的决策支持,从而为有关部门或企业进行全局范围的多维分析、战略决策和长期趋势分析提供了有
12、效的支持。的多维分析、战略决策和长期趋势分析提供了有效的支持。由于空间数据的特殊性,空间数据仓库在数据仓库由于空间数据的特殊性,空间数据仓库在数据仓库的基础上需引入空间维数据,根据主题从不同的的基础上需引入空间维数据,根据主题从不同的GISGIS应用应用系统中截取从瞬态到区段直至全球系统上的信息,从而提系统中截取从瞬态到区段直至全球系统上的信息,从而提供最好的信息服务。供最好的信息服务。v 空间数据仓库的产生趋势空间数据仓库的产生趋势10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第13页,共83页。空间数据仓库(空间数据仓库(Spatial Da
13、ta WarehouseSpatial Data Warehouse,简称,简称SDWSDW)是)是集成的集成的、面向主题的面向主题的、相对稳定的相对稳定的、反映时反映时间变化和地理空间变化的间变化和地理空间变化的空间数据存储,以支持各级管空间数据存储,以支持各级管理人员基于空间数据的分析和决策。理人员基于空间数据的分析和决策。v 空间数据仓库的概念和内涵空间数据仓库的概念和内涵10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第14页,共83页。空间数据仓库是空间数据仓库是GISGIS、空间数据库与数据仓库技术相、空间数据库与数据仓库技术相结合的产
14、物结合的产物,它在普通数据仓库基础上,引入空间数据,增,它在普通数据仓库基础上,引入空间数据,增加对空间数据的存贮、管理和分析能力,根据主题从不同的加对空间数据的存贮、管理和分析能力,根据主题从不同的空间数据源中截取不同规模的时空尺度上的信息,从而为地空间数据源中截取不同规模的时空尺度上的信息,从而为地学研究以及有关资源环境政策的制定等空间决策支持过程提学研究以及有关资源环境政策的制定等空间决策支持过程提供最好的信息服务。供最好的信息服务。空间数据仓库是数据仓库与空间处理分析空间数据仓库是数据仓库与空间处理分析的综合,具有空间,时间和主题的高度集成的综合,具有空间,时间和主题的高度集成。从信息
15、科学的角度。从信息科学的角度来说,它是对数据仓库加进了非结构化信息处理。来说,它是对数据仓库加进了非结构化信息处理。v 空间数据仓库的概念和内涵空间数据仓库的概念和内涵10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第15页,共83页。SDWSDW支持多种数据源支持多种数据源:数据库、数据文件、应:数据库、数据文件、应用程序等;用程序等;SDWSDW中存放的不仅是供使用的数据,还有在一中存放的不仅是供使用的数据,还有在一定激发条件下能主动其作用的定激发条件下能主动其作用的处理规则、算法,处理规则、算法,甚至是过程甚至是过程等;等;SDWSDW中数据
16、并不完全是原始数据的简单归并和中数据并不完全是原始数据的简单归并和搬家,而是增值和统一,因此,搬家,而是增值和统一,因此,“汇总并统一汇总并统一”是一种可取的描述;是一种可取的描述;v 空间数据仓库的概念和内涵空间数据仓库的概念和内涵10.1 10.1 数据仓库与空间数据仓库数据仓库与空间数据仓库第10章空间数据仓库与数据挖掘第16页,共83页。数据的集成化数据的集成化表明数据在结构上具有综合性,并且在语言上表明数据在结构上具有综合性,并且在语言上是异构的,在进入是异构的,在进入SDWSDW之前,必须经过加工和集成,这是之前,必须经过加工和集成,这是SDWSDW建设中最关键,最复杂的一步;建设
17、中最关键,最复杂的一步;历史化表明历史化表明它可以截取不同时间尺度上的信息,从瞬它可以截取不同时间尺度上的信息,从瞬态到区段直到全体。态到区段直到全体。SDWSDW以时间为基准管理(积累,以时间为基准管理(积累,使用并处理)数据,即使依赖与时间维的数据结构;使用并处理)数据,即使依赖与时间维的数据结构;SDWSDW保存和管理的是保存和管理的是“对象对象”数据以及与之相关的数据以及与之相关的处理规则,算法和过程等的统一体,它们在处理规则,算法和过程等的统一体,它们在SDWSDW中以中以打包及有序存放的形式被保存和维护,且需要即可使用。打包及有序存放的形式被保存和维护,且需要即可使用。v 空间数据
18、仓库的概念和内涵空间数据仓库的概念和内涵10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第17页,共83页。v 空空间间数数据据仓仓库库的的体体系系结结构构10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库空间数据仓库应用(空间决策支持系统等)空间数据仓库应用(空间决策支持系统等)分析结果分析结果联机分析处理联机分析处理数据挖掘数据挖掘数据仓库中信息数据仓库中信息多级存储策略多级存储策略数据库数据库空间数据库系统(数据管理部分)空间数据库系统(数据管理部分)SDBSDBSDB数据采集与输入系统(数据源部分)数据采集与输入系统(数据源部
19、分)核心核心GIS数据数据政府统计政府统计数据数据市场经济市场经济数据数据土地利用土地利用数据数据分析工具分析工具数据转换数据转换数据输入数据输入决策运算决策运算MBKB空空间间数数据据仓仓库库第10章空间数据仓库与数据挖掘第18页,共83页。空间数据仓库机制的研究围绕空间数据仓库的实际应用空间数据仓库机制的研究围绕空间数据仓库的实际应用需求,探索空间数据仓库的关键技术。需求,探索空间数据仓库的关键技术。(1 1)支持空间信息的空间数据仓库模型:)支持空间信息的空间数据仓库模型:空间数据仓库空间数据仓库的数据模型是普通数据仓库的数据模型的有效扩充,必的数据模型是普通数据仓库的数据模型的有效扩充
20、,必须针对空间信息的特点,对星型模型和雪花模型进行扩须针对空间信息的特点,对星型模型和雪花模型进行扩展。展。(2 2)支持空间数据导航的元数据机制:)支持空间数据导航的元数据机制:空间数据仓库的元空间数据仓库的元数据是人们定义空间数据仓库模型、理解空间数据意义数据是人们定义空间数据仓库模型、理解空间数据意义的重要窗口,空间数据仓库的元数据必须支持对空间数的重要窗口,空间数据仓库的元数据必须支持对空间数据分析的导航。据分析的导航。v 空间数据仓库的关键技术空间数据仓库的关键技术10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第19页,共83页。(3
21、3)面向海量空间信息的数据存储策略:)面向海量空间信息的数据存储策略:空间数据空间数据仓库包含海量的空间信息。支持对海量空间信息仓库包含海量的空间信息。支持对海量空间信息的高效的存储和检索是空间数据仓库的重要需求,的高效的存储和检索是空间数据仓库的重要需求,也是空间数据仓库的重要特征。因此需要研究面也是空间数据仓库的重要特征。因此需要研究面向海量空间信息的数据存储策略。向海量空间信息的数据存储策略。(4 4)面向海量空间信息高效检索的空间索引机制:)面向海量空间信息高效检索的空间索引机制:数据索引是提高数据检索效率的有效途径。由于空间数数据索引是提高数据检索效率的有效途径。由于空间数据仓库中涉
22、及海量的空间信息,因此需要研究面向空间据仓库中涉及海量的空间信息,因此需要研究面向空间数据仓库的索引机制。数据仓库的索引机制。v 空间数据仓库的关键技术空间数据仓库的关键技术10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第20页,共83页。(5 5)大规模空间数据处理:)大规模空间数据处理:由于空间数据所包含的数由于空间数据所包含的数据量比较大,当空间数据仓库中地理数据、元数据以及历据量比较大,当空间数据仓库中地理数据、元数据以及历史数据的数据量急速增长时数据的存储和管理机制的调整史数据的数据量急速增长时数据的存储和管理机制的调整策略等问题需要更
23、加深入的研究。策略等问题需要更加深入的研究。(6 6)查询的建立和数据导航技术:)查询的建立和数据导航技术:空间数据的查询通常比空间数据的查询通常比较复杂,而目前的用户界面形式很难满足。必须为空间数据较复杂,而目前的用户界面形式很难满足。必须为空间数据仓库数据查询的输入以及数据查询的建立提供一套合适的机仓库数据查询的输入以及数据查询的建立提供一套合适的机制。制。(7 7)快速计算、高速网络、空间数据库的无缝连接、数据)快速计算、高速网络、空间数据库的无缝连接、数据挖掘、空间数据联机分析和处理及服务的互操作等关键技术。挖掘、空间数据联机分析和处理及服务的互操作等关键技术。v 空间数据仓库的关键技
24、术空间数据仓库的关键技术10.1 10.1 数据仓库与空间数据仓数据仓库与空间数据仓库库第10章空间数据仓库与数据挖掘第21页,共83页。目前国外数据仓库以及空间数据仓库方面的主要工作基础有目前国外数据仓库以及空间数据仓库方面的主要工作基础有很多。很多。StanfordStanford大学的数据仓库大学的数据仓库WHIPS(WareHouse WHIPS(WareHouse Information Project at Stanford)Information Project at Stanford);美国正在启动一个空间信;美国正在启动一个空间信息处理项目息处理项目EOS(Earth Ove
25、rview System)EOS(Earth Overview System),到,到20032003年,对全年,对全球地面监测的精度将达到球地面监测的精度将达到1 1米的分辨率,该项目对巩固美国在全米的分辨率,该项目对巩固美国在全球的竞争优势具有重要的作用。该项目的主要组成部分之一就是球的竞争优势具有重要的作用。该项目的主要组成部分之一就是空间数据的联机分析与挖掘技术的研究;空间数据的联机分析与挖掘技术的研究;IBMIBM的的AlmendenAlmenden实验实验室、北美和德国的一些公司、和科研机构的实验室在这个领域的室、北美和德国的一些公司、和科研机构的实验室在这个领域的研究中处于领先位
展开阅读全文