1.数据仓库的概念和特点p11
定义:一个面向主题的、集成的、非易失的且随时间变化的数据集合,用来支持管理人员作出决策。
特性:
面向主题的、集成的、非易失的、随时间不断变化的。
1、面向主题的:数据仓库以一个奇特或组织机构中固有的业务主题作为处理的主体,是从整体的、全局的角度来衡量这些主题在企业中的作用。
2、集成的:数据仓库必须将不一致的数据进行有效的集成,使之在数据仓库中有一致性的表示形式。一致性问题只是集成所包含的一部分工作,另外还需要根据主题进行有效的数据组织。
3、非易失性:一旦操作型数据进入数据仓库,只要数据未超过数据仓库的数据存储期限,通常不对数据进行更新操作,而只进行查询操作。即不进行一般意义上的更新,而且与操作型数据相比,更新频率要低得多,对时间的要求更为宽松。
4、随时间不断变化的(数据因时而变的特点)《与操作型数据比较的,书上14页》:(1)数据仓库中的数据的时间期限要远远长于操作型环境中的数据的时间期限。操作型环境一般60-90天,数据仓库5-10年。
一个数据仓库的大小一般都是在100GB以上
通常,数据仓库系统应该包含下列程序:
(1)抽取数据与加载数据
(2)整理并转换数据(采用一种数据仓库适用的数据格式)
(3)备份与备存数据
(4)管理所有查询(即将查询导向适当的数据源 )
数据仓库中的数据只是一系列某一时刻所生成的数据的复杂快照。
数据仓库的键码结构总是包含某时间元素。
2.数据仓库中的关键概念14
外部数据源:就是从系统外部获取的同分析主题相关的数据。
数据抽取:是数据仓库按分析的主题从业务数据库抽取相关数据的过程。现有的数据仓库产品几乎都提供关系型数据接口,提供抽取引擎以从关系型数据中抽取数据。
数据清洗:从多个业务系统中获取数据时,必须进行必要的数据清洗,从而得到准确的数据。所谓“清洗”是指在放入数据仓库之前将错误的、不一致的数据予以更正或删除,以免影响DSS决策的正确性。(15页有例子)
数据转换:各种数据库产品所提供的数据类型可能不同,需要将不同格式的数据转换成统一的数据格式,称为数据转换。
数据加载:是指把清洗后的数据装入数据仓库的过程。数据加载策略包括数据加载周期和数据追加策略。对不同业务的数据采用不同的加载周期,但必须保持同一时刻业务数据的完整性和一致性。
元数据:元数据是关于数据的数据。元数据位于数据仓库的上层,而且能够记录数据仓库中对象的位置。(p16-17)
数据集市:面向企业中的某个部门(主题)而在逻辑上或物理上划分出来的数据仓库中的数据子集成为书记集市。数据仓库面向整个企业,数据集市面向企业中的某个部门。数据仓库中存放企业的整体信息,数据集市只存放某个主题所
数据仓库与数据挖掘技术复习资料一、单项选择题 1. 数据挖掘技术包括三个主要的部分 ( C A.数据、模型、技术 C.数据、建模能力、算法与技术 2.关于基本数据的...
一、选择题 1.数据挖掘技术包括三个主要的部分 ( C ) A)数据、模型、技术 C)数据、建模能力、算法与技术 2.在 ID3 算法中信息增益是指( D ) A)信息的...
数据仓库和数据挖掘技术复习提纲一.数据库、数据库管理系统与数据仓库 1 从传统数据库到数据仓库、 宏观原因(1)“数据太多,信息不足”的现状(2)异构环境的数据...
数据仓库的系统结构 结构:管理层(ETL 管理工具) 、存储层(数据仓库与数据集市) 、分析工具层(OLAP、数据 挖掘等)3 部分 ETL:Extract-Transform-Load 的缩写,即...
3、数据仓库与数据挖掘的关系:1)数据仓库系统的数据可以作为数据挖掘的数 据源。2)数据挖掘的数据源不一定必须是数据仓库系统 4、数据挖掘的功能:概念描述,关联...
数据仓库与数据挖掘技术期末复习纲要 2011-2012(1)一、掌握以下基本概念: 1.数据挖掘:就是从存放在数据库,数据仓库或其他信息库中的大量的数据中获取有效 的、...
数据挖掘复习资料数据挖掘复习资料隐藏>> 1.3 支持数据挖掘技术的基础 数据... ” “在新英格兰的 数据仓库 分部去年三月的 ; 销售额是多少? 决策支持 ...
数据仓库与数据挖掘期末复习_理学_高等教育_教育专区。弹指落间心已醉,此心... 2014教师资格材料分析辅... 2014小学教师资格考试《... 2014年幼儿园教师资格...
同系列文档 朝鲜历届领导人资料 朝鲜现状 为什么南北朝鲜会分裂 朝鲜的近代史... 数据仓库与数据挖掘期末综合复习 隐藏>> 第一章 1、数据仓库就是一个面向...
热门文档