中文LES09-规划数据仓库的存储--数据仓库教学-中文oracle99版课件.ppt
Copyright Oracle Corporation,1999.All rights reserved.9规划数据仓库的存储规划数据仓库的存储规划数据仓库的存储规划数据仓库的存储9-9-2 2Copyright Oracle Corporation,1999.All rights reserved.总述总述总述总述项目管理项目管理(方法论方法论,维持元数据维持元数据)定义数据仓库的定义数据仓库的概念及术语概念及术语规划一个成功规划一个成功的数据仓库的数据仓库分析用户分析用户查询需求查询需求选择一个处理选择一个处理体系结构体系结构建模数据仓库建模数据仓库规划数据仓库规划数据仓库存储存储ETT（构建数据仓库）（构建数据仓库）满足业务需求满足业务需求管理数据仓库管理数据仓库支持最终支持最终用户存取用户存取9-9-3 3Copyright Oracle Corporation,1999.All rights reserved.目标目标目标目标在完成这一课后在完成这一课后在完成这一课后在完成这一课后,你应该能够做到以下几点你应该能够做到以下几点你应该能够做到以下几点你应该能够做到以下几点:讨论不同的分割方法和索引方法讨论不同的分割方法和索引方法讨论不同的分割方法和索引方法讨论不同的分割方法和索引方法考虑不同的考虑不同的考虑不同的考虑不同的RAIDRAID（廉价冗余磁盘阵列）等级在保护数（廉价冗余磁盘阵列）等级在保护数（廉价冗余磁盘阵列）等级在保护数（廉价冗余磁盘阵列）等级在保护数据库方面的好处和局限性据库方面的好处和局限性据库方面的好处和局限性据库方面的好处和局限性9-9-4 4Copyright Oracle Corporation,1999.All rights reserved.数据分割数据分割数据分割数据分割数据分割使得它们成为数据分割使得它们成为数据分割使得它们成为数据分割使得它们成为 能够独立处理的物理单位能够独立处理的物理单位能够独立处理的物理单位能够独立处理的物理单位容易做容易做容易做容易做:重构重构重构重构 重组重组重组重组删除删除删除删除恢复恢复恢复恢复监视监视监视监视管理管理管理管理存档存档存档存档索引索引索引索引Feb 98Feb 98Mar 98Mar 98添加添加添加添加丢弃丢弃丢弃丢弃命令表命令表命令表命令表其它数据不受影响其它数据不受影响其它数据不受影响其它数据不受影响Jan 98Jan 989-9-5 5Copyright Oracle Corporation,1999.All rights reserved.9-9-6 6Copyright Oracle Corporation,1999.All rights reserved.水平分割水平分割水平分割水平分割表和索引数据按以下形式分割：表和索引数据按以下形式分割：表和索引数据按以下形式分割：表和索引数据按以下形式分割：时间时间时间时间销售区域或人销售区域或人销售区域或人销售区域或人地理位置地理位置地理位置地理位置组织机构组织机构组织机构组织机构业务流程业务流程业务流程业务流程 WHERE WHERE 子句中包含的候选列子句中包含的候选列子句中包含的候选列子句中包含的候选列分析决策需求分析决策需求分析决策需求分析决策需求9-9-7 7Copyright Oracle Corporation,1999.All rights reserved.垂直分割垂直分割垂直分割垂直分割你可能会使用垂直分割的时候：你可能会使用垂直分割的时候：你可能会使用垂直分割的时候：你可能会使用垂直分割的时候：为改善查询和更新速度为改善查询和更新速度为改善查询和更新速度为改善查询和更新速度用户需要存取特定的列用户需要存取特定的列用户需要存取特定的列用户需要存取特定的列一些数据不是频繁地被改变一些数据不是频繁地被改变一些数据不是频繁地被改变一些数据不是频繁地被改变去除维本身的文本描述信息去除维本身的文本描述信息去除维本身的文本描述信息去除维本身的文本描述信息9-9-8 8Copyright Oracle Corporation,1999.All rights reserved.分割方法分割方法分割方法分割方法范围分割范围分割范围分割范围分割(Oracle8(Oracle8 和和和和Oracle8Oracle8ii)哈希分割哈希分割哈希分割哈希分割(Oracle8(Oracle8ii)复合分割复合分割复合分割复合分割(Oracle8(Oracle8ii)范围分割范围分割哈希分割哈希分割复合分割复合分割9-9-9 9Copyright Oracle Corporation,1999.All rights reserved.9-9-1010Copyright Oracle Corporation,1999.All rights reserved.星型转换星型转换星型转换星型转换STAR_TRANSFORMATION_ENABLEDKey 1Key 2Key 3Key 1Key 2Key 3Product_TableMarket_TableTime_TableDollarsFact_TableYearMonthStatBrand100210011003100210031001March1998ABCSF6000200220032001100003002300330011520040024003400195269-9-1111Copyright Oracle Corporation,1999.All rights reserved.索引索引索引索引使用索引是因为使用索引是因为使用索引是因为使用索引是因为:节省巨大的成本节省巨大的成本节省巨大的成本节省巨大的成本,极大地提高性能和可测量性极大地提高性能和可测量性极大地提高性能和可测量性极大地提高性能和可测量性可通过只读一个包括所需行的磁盘块指引的索引代替一可通过只读一个包括所需行的磁盘块指引的索引代替一可通过只读一个包括所需行的磁盘块指引的索引代替一可通过只读一个包括所需行的磁盘块指引的索引代替一个整表的扫描个整表的扫描个整表的扫描个整表的扫描通过读索引，而不是查询整张表，可以快速地找到需要通过读索引，而不是查询整张表，可以快速地找到需要通过读索引，而不是查询整张表，可以快速地找到需要通过读索引，而不是查询整张表，可以快速地找到需要查询的行在磁盘中的位置。查询的行在磁盘中的位置。查询的行在磁盘中的位置。查询的行在磁盘中的位置。9-9-1212Copyright Oracle Corporation,1999.All rights reserved.9-9-1313Copyright Oracle Corporation,1999.All rights reserved.位图索引位图索引位图索引位图索引优化性能和节省存储空间优化性能和节省存储空间优化性能和节省存储空间优化性能和节省存储空间存储值仅为存储值仅为存储值仅为存储值仅为 1 1和和和和 0 0当出现以下情况时，通常使用位图索引而非当出现以下情况时，通常使用位图索引而非当出现以下情况时，通常使用位图索引而非当出现以下情况时，通常使用位图索引而非B-B-树索引树索引树索引树索引:表很大表很大表很大表很大列数相对低维列数相对低维列数相对低维列数相对低维位图索引的产品颜色位图索引的产品颜色位图索引的产品颜色位图索引的产品颜色Blue-10010100Blue-10010100Green-00100000Green-00100000Mauve-00001001Mauve-00001001Gold-01000010Gold-010000109-9-1414Copyright Oracle Corporation,1999.All rights reserved.9-9-1515Copyright Oracle Corporation,1999.All rights reserved.保护数据库保护数据库保护数据库保护数据库大型数据库必须有大型数据库必须有大型数据库必须有大型数据库必须有RAID(RAID(廉价冗余磁盘阵列廉价冗余磁盘阵列廉价冗余磁盘阵列廉价冗余磁盘阵列)RAID RAID 改善了改善了改善了改善了:可靠性可靠性可靠性可靠性存储管理存储管理存储管理存储管理RAIDRAID有不同的级别有不同的级别有不同的级别有不同的级别可以通过磁盘分块避免磁盘使用的竞争可以通过磁盘分块避免磁盘使用的竞争可以通过磁盘分块避免磁盘使用的竞争可以通过磁盘分块避免磁盘使用的竞争9-9-1616Copyright Oracle Corporation,1999.All rights reserved.RAID 0:RAID 0:分块分块分块分块文件被写到一个四驱动器的磁盘序列中：文件被写到一个四驱动器的磁盘序列中：文件被写到一个四驱动器的磁盘序列中：文件被写到一个四驱动器的磁盘序列中：块块块块 1 1 在驱动器在驱动器在驱动器在驱动器 1 1块块块块 2 2 在驱动器在驱动器在驱动器在驱动器 2.2.块块块块5 5 在另一个扇区的驱动器在另一个扇区的驱动器在另一个扇区的驱动器在另一个扇区的驱动器11上上上上文件文件A(a)文件文件A(e)文件文件A(b)文件文件A(f)文件文件A(c)文件文件A(d)磁盘阵列控制器磁盘阵列控制器9-9-1717Copyright Oracle Corporation,1999.All rights reserved.9-9-1818Copyright Oracle Corporation,1999.All rights reserved.RAID 1:RAID 1:镜像镜像镜像镜像复制的文件存储在镜像磁盘里复制的文件存储在镜像磁盘里复制的文件存储在镜像磁盘里复制的文件存储在镜像磁盘里磁盘阵列控制器磁盘阵列控制器磁盘磁盘 1磁盘磁盘1 Mirror磁盘磁盘2磁盘磁盘2 Mirror文件文件 A(a)文件文件A(b)文件文件A(a)文件文件A(b)文件文件B(c)文件文件B(d)文件文件B(e)文件文件B(c)文件文件B(d)文件文件B(e)9-9-1919Copyright Oracle Corporation,1999.All rights reserved.RAID 1:RAID 1:镜像镜像镜像镜像优点优点优点优点:完全的数据冗余完全的数据冗余完全的数据冗余完全的数据冗余无性能损失无性能损失无性能损失无性能损失改善读取改善读取改善读取改善读取具有可测量性具有可测量性具有可测量性具有可测量性局限局限局限局限:在在在在RAIDRAID的所有配置中成本最高的所有配置中成本最高的所有配置中成本最高的所有配置中成本最高9-9-2020Copyright Oracle Corporation,1999.All rights reserved.RAID 5:RAID 5:独立的磁盘阵列独立的磁盘阵列独立的磁盘阵列独立的磁盘阵列使用奇偶交叉排序使数据分块使用奇偶交叉排序使数据分块使用奇偶交叉排序使数据分块使用奇偶交叉排序使数据分块File C(b)File C(e)P(d,e,f,g,h)File C(a)File C(d)File(h)P(i,j)File C(c)File C(f)File C(i)P(a,b,c)File C(g)File C(j)磁盘阵列控制器磁盘阵列控制器磁盘磁盘 1磁盘磁盘 2磁盘磁盘 3磁盘磁盘49-9-2121Copyright Oracle Corporation,1999.All rights reserved.RAID 5:RAID 5:独立的磁盘阵列独立的磁盘阵列独立的磁盘阵列独立的磁盘阵列优点优点优点优点:有效的数据整合有效的数据整合有效的数据整合有效的数据整合数据重建数据重建数据重建数据重建多并发寻求交叉阵列多并发寻求交叉阵列多并发寻求交叉阵列多并发寻求交叉阵列可升级的可升级的可升级的可升级的局限局限局限局限:磁盘重叠磁盘重叠磁盘重叠磁盘重叠数据写入比率数据写入比率数据写入比率数据写入比率 仓库典型的使用仓库典型的使用RAID 0,1,or 59-9-2222Copyright Oracle Corporation,1999.All rights reserved.备份备份备份备份在设计阶段规划在设计阶段规划在设计阶段规划在设计阶段规划为为为为 VLDBs VLDBs使用热备份使用热备份使用热备份使用热备份备份必需的构件备份必需的构件备份必需的构件备份必需的构件:事实表和维表中的数据事实表和维表中的数据事实表和维表中的数据事实表和维表中的数据仓库模式仓库模式仓库模式仓库模式元数据模式元数据模式元数据模式元数据模式元数据元数据元数据元数据输入输入输入输入/输出工具输出工具输出工具输出工具 磁盘空间磁盘空间磁盘空间磁盘空间 时间时间时间时间9-9-2323Copyright Oracle Corporation,1999.All rights reserved.9-9-2424Copyright Oracle Corporation,1999.All rights reserved.实践实践实践实践 9-1 9-1 概述概述概述概述实践包括以下课题实践包括以下课题实践包括以下课题实践包括以下课题:定义分割的方法定义分割的方法定义分割的方法定义分割的方法识别索引方法识别索引方法识别索引方法识别索引方法确定确定确定确定RAID RAID 级别和为每个级别提供依据级别和为每个级别提供依据级别和为每个级别提供依据级别和为每个级别提供依据
