(4.1.1)--4.1数据仓库基本概念.pdf

《(4.1.1)--4.1数据仓库基本概念.pdf》由会员分享，可在线阅读，更多相关《(4.1.1)--4.1数据仓库基本概念.pdf（16页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、第第4 4章章 数据仓库与数据仓库与OLAPOLAP 目录目录 CONTENTS 1.51.5 2 4.1 4.2 4.3 4.4 数据仓库基本概念 数据仓库基本概念 数据仓库设计 数据仓库设计 数据仓库实现 数据仓库实现 联机分析处理 联机分析处理 元数据模型 元数据模型 4.5 Chapter 4.1 数据仓库基本概念 数据仓库基本概念 4 4.1 数据仓库基本概念 1.1.数据仓库的定义及特征数据仓库的定义及特征 数据仓库是一个面向主题的、集成的、时变的并且非易失的，用于支持管理者决策过程的数据集合 数据仓库的特征 面向主题的 集成的 时变的 非易失的 5 4.1 数据仓库基本概念 数据

2、仓库数据仓库-面向主题的面向主题的 围绕重要的主题组织，例如客户、产品、销售额 关注决策者进行数据建模与分析，不关注日常操作及事务处理 通过排除对决策无用的数据，为特定主题提供简单且简洁的视图 6 4.1 数据仓库基本概念 数据仓库数据仓库-集成的集成的 基于集成多个异构的数据源进行构建 关系数据库、一般文件、联机事务处理记录 应用数据清理及数据集成技术 确保不同数据源中的命名约定、编码结构、属性度量等方面的一致性 例如，宾馆价格：货币种类、税额、是否含早餐等等 当数据被移入数据仓库时将会被转换 7 4.1 数据仓库基本概念 数据仓库数据仓库-时变的时变的 数据仓库涵盖的时间范围要显著长于业务

3、操作系统数据 业务操作数据库数据：实时数据 数据仓库数据：从历史角度提供信息（例如，过去的5-10年）数据仓库中的每个关键结构 隐式或显式地包括时间元素 但是业务数据库中的关键结构既可包括也可以不包括“时间元素”8 4.1 数据仓库基本概念 数据仓库数据仓库-非易失的 非易失的 数据仓库将业务环境中的数据转换并在物理上分离存储 数据仓库环境下不存在业务上的数据更新 不需要事务处理、恢复及并发控制机制 只需要两种数据访问操作：数据初始装入和数据访问 9 4.1 数据仓库基本概念 2.2.数据仓库体系结构 数据仓库体系结构 其他数据源业务数据库数据仓库元数据监控&集成分析查询报表数据挖掘提取变换装

4、入刷新数据集市服务OLAP服务器数据源数据存储OLAP引擎前端工具10 4.1 数据仓库基本概念 底层底层-数据仓库服务器 数据仓库服务器 使用一些后端工具和实用程序，对其他外部数据源的数据进行提取、清理、变换、装入和刷新，将高质量的数据更新到数据仓库。数据集市，也叫数据市场，是一个从操作的数据和其他的为某个特殊的专业人员团体服务的数据源中收集数据的仓库，是数据仓库的子集。11 4.1 数据仓库基本概念 中间层中间层：OLAPOLAP服务器 服务器 联机分析处理（Online Analytical Processing,OLAP）是数据仓库系统前端分析服务的分析工具，能快速汇总大量数据并进行高

5、效查询分析，为分析人员提供决策支持。使用OLAP相关模型将多维数据上的操作映射为标准的关系操作，或者直接实现多维数据操作 OLAP操作可以与关联、分类、预测、聚类等数据挖掘功能结合，以加强多维数据挖掘 12 4.1 数据仓库基本概念 顶层顶层：前端客户层前端客户层 包括数据挖掘工具（如趋势分析、预测等）、数据分析工具和查询与报告工具。用于知识发现相关工作人员（如经理、主管、分析人员等）直接操作获取知识。13 4.1 数据仓库基本概念 3.3.数据模型数据模型 数据模型是数据仓库建设的基础。一个完整、灵活、稳定的数据模型对数据仓库项目的成功有重要的作用。数据模型是整个系统建设过程的导航图 有利于

6、数据的整合 排除数据描述的不一致性 可以消除数据仓库中的冗余数据 14 4.1 数据仓库基本概念 三级数据模型三级数据模型 概念模型 对现实世界中问题域内的事物的描述，不是对软件设计的描述 逻辑模型 对概念模型中的主题进行细化 定义实体与实体之间的关系，以及实体的属性 物理模型 依照逻辑模型，在数据库中建表、索引等 为了满足高性能的需求，数据仓库可以增加冗余、隐藏表之间的约束等反第三范式操作 15 4.1 数据仓库基本概念 4.4.粒度粒度 数据仓库的数据单位中保存数据的细化或综合程度的级别 粒度越小，细节程度越高，综合程度越低，查询类型越多 粒度越高，综合程度越高，查询的效率也越高 在数据仓库中可将小粒度的数据存储在低速存储器上，大粒度的数据存储在高速存储器上 THANKS FOR YOUR ATTENTION 感谢指导感谢指导！