数据库系统概论(第四版)王珊萨师煊chp.ppt
《数据库系统概论(第四版)王珊萨师煊chp.ppt》由会员分享,可在线阅读,更多相关《数据库系统概论(第四版)王珊萨师煊chp.ppt(100页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、数据库系统概论数据库系统概论An Introduction to Database System第九章第九章 关系查询处理和查询优化关系查询处理和查询优化An Introduction to Database System第九章第九章 关系系统及其查询优化关系系统及其查询优化9.1 关系数据库系统的查询处理关系数据库系统的查询处理 9.2 关系数据库系统的查询优化关系数据库系统的查询优化 9.3 代数优化代数优化9.4 物理优化物理优化 9.5 小小 结结 An Introduction to Database System关系系统及其查询优化(续)关系系统及其查询优化(续)v本章目的:本章目
2、的:RDBMS的查询处理步骤查询优化的概念基本方法和技术v查询优化分类:代数优化物理优化An Introduction to Database System关系系统关系系统v能够在一定程度上支持关系模型的数据库管理系统是关系系统。v由于关系模型中并非每一部分都是同等重要的v并不苛求一个实际的关系系统必须完全支持关系模型。An Introduction to Database System关系系统与关系模型关系系统与关系模型v关系数据结构域及域上定义的关系v关系操作并、交、差、广义笛卡尔积、选择、投影、连接、除等v关系完整性实体完整性、参照完整性、用户自己定义的完整性An Introductio
3、n to Database System关系系统的定义关系系统的定义 一个数据库管理系统可定义为关系系统,当且仅当它至少支持:1.关系数据库(即关系数据结构)系统中只有表这种结构2.支持选择、投影和(自然)连接运算对这些运算不要求用户定义任何物理存取路径对关系系统的最低要求An Introduction to Database System关系系统的定义关系系统的定义 不支持关系数据结构的系统显然不能称为关系系统仅支持关系数据结构,但没有选择、投影和连接运算功能的系统仍不能算作关系系统。原因:不能提高用户的生产率v支持选择、投影和连接运算,但要求定义物理存取路径,这种系统也不能算作真正的关系系
4、统原因:就降低或丧失了数据的物理独立性v选择、投影、连接运算是最有用的运算An Introduction to Database System关系系统的分类关系系统的分类 v分类依据:支持关系模型的程度v分类表式系统:支持关系数据结构(即表)(最小)关系系统支持:关系数据结构选择、投影、连接关系操作关系完备的系统支持:关系数据结构所有的关系代数操作全关系系统支持:关系模型的所有特征特别是:数据结构中域的概念An Introduction to Database System倒排表倒排表 在保留原表(主表)的同时,将可作检索参数的每个属性的每个值建立一个称为倒排表的线性表。该表中每个元素包括两个
5、域:一是属性的值(如系别中的数学系),二是具有该属性值的记录的关键字值。例如,书上系别和职称的倒排表。倒排表系统由主表和倒排表组成。该方法使检索方便,但插入和删除较为困难。An Introduction to Database System倒排表倒排表An Introduction to Database System倒排表倒排表倒排表中也可列出结点的地址,而不列出关键字值。An Introduction to Database System关系系统的分类关系系统的分类(续)(续)数据结构数据结构数据操作数据操作完整性完整性表式系统表式系统表表 (最小最小)关系系统关系系统表表选选择择、投投影
6、影、连接连接 关系完备的系统关系完备的系统表表 全关系系统全关系系统 An Introduction to Database System9.1 关系数据库系统的查询处理关系数据库系统的查询处理v9.1.1 查询处理步骤查询处理步骤v9.1.2 实现查询操作的算法示例实现查询操作的算法示例 An Introduction to Database System9.1.1 查询处理步骤查询处理步骤vRDBMS查询处理阶段查询处理阶段:1.查询分析2.查询检查3.查询优化4.查询执行An Introduction to Database System查询处理步骤(续)查询处理步骤(续)查询处理步骤A
7、n Introduction to Database System1.查询分析查询分析v对查询语句进行扫描、词法分析和语法分析v从查询语句中识别出语言符号v进行语法检查和语法分析An Introduction to Database System2.查询检查查询检查 v根据数据字典对合法的查询语句进行语义检查v根据数据字典中的用户权限和完整性约束定义对用户的存取权限进行检查v检查通过后把SQL查询语句转换成等价的关系代数表达式vRDBMS一般都用查询树(语法分析树)来表示扩展的关系代数表达式v把数据库对象的外部名称转换为内部表示An Introduction to Database Syste
8、m3.查询优化查询优化v查询优化:选择一个高效执行的查询处理策略v查询优化分类:代数优化:指关系代数表达式的优化物理优化:指存取路径和底层操作算法的选择v查询优化方法选择的依据:基于规则(rulebased)基于代价(costbased)基于语义(semanticbased)An Introduction to Database System4.查询执行查询执行 v依据优化器得到的执行策略生成查询计划v代码生成器(codegenerator)生成执行查询计划的代码An Introduction to Database System9.1 关系数据库系统的查询处理关系数据库系统的查询处理v9.1
9、.1 查询处理步骤查询处理步骤v9.1.2 实现查询操作的算法示例实现查询操作的算法示例 An Introduction to Database System9.1.2 实现查询操作的算法示例实现查询操作的算法示例 v一、选择操作的实现v二、连接操作的实现An Introduction to Database System一、一、选择操作的实现选择操作的实现 v例1Select*fromstudentwhere;考虑的几种情况:C1:无条件;C2:Sno200215121;C3:Sage20;C4:SdeptCSANDSage20;An Introduction to Database Sys
10、tem选择操作的实现(续)选择操作的实现(续)v选择操作典型实现方法:选择操作典型实现方法:1.简单的全表扫描方法简单的全表扫描方法对查询的基本表顺序扫描,逐一检查每个元组是否满足选择条件,把满足条件的元组作为结果输出适合小表,不适合大表2.索引索引(或散列或散列)扫描方法扫描方法适合选择条件中的属性上有索引(例如B+树索引或Hash索引)通过索引先找到满足条件的元组主码或元组指针,再通过元组指针直接在查询的基本表中找到元组An Introduction to Database System选择操作的实现(续)选择操作的实现(续)v例1-C2以C2为例,Sno200215121,并且Sno上有
11、索引(或Sno是散列码)使用索引(或散列)得到Sno为200215121元组的指针通过元组指针在student表中检索到该学生v例1-C3以C3为例,Sage20,并且Sage上有B+树索引使用B+树索引找到Sage20的索引项,以此为入口点在B+树的顺序集上得到Sage20的所有元组指针通过这些元组指针到student表中检索到所有年龄大于20的学生。An Introduction to Database System选择操作的实现(续)选择操作的实现(续)v例1-C4以C4为例,SdeptCSANDSage20,如果Sdept和Sage上都有索引:算法一:分别用上面两种方法分别找到Sdep
12、tCS的一组元组指针和Sage20的另一组元组指针求这2组指针的交集到student表中检索得到计算机系年龄大于20的学生算法二:找到SdeptCS的一组元组指针,通过这些元组指针到student表中检索对得到的元组检查另一些选择条件(如Sage20)是否满足把满足条件的元组作为结果输出。An Introduction to Database System二、二、连接操作的实现连接操作的实现 v连接操作是查询处理中最耗时的操作之一v本节只讨论等值连接(或自然连接)最常用的实现算法v例2SELECT*FROMStudent,SCWHEREStudent.Sno=SC.Sno;An Introdu
13、ction to Database System连接操作的实现(续)连接操作的实现(续)v1.嵌套循环方法(nestedloop)v2.排序-合并方法(sort-mergejoin或mergejoin)v3.索引连接(indexjoin)方法v4.HashJoin方法An Introduction to Database System连接操作的实现(续)连接操作的实现(续)1.嵌套循环方法嵌套循环方法(nested loop)对外层循环(Student)的每一个元组(s),检索内层循环(SC)中的每一个元组(sc)检查这两个元组在连接属性(sno)上是否相等如果满足连接条件,则串接后作为结果输
14、出,直到外层循环表中的元组处理完为止An Introduction to Database System连接操作的实现(续)连接操作的实现(续)2.排序排序-合并方法合并方法(sort-merge join 或或merge join)适合连接的诸表已经排好序的情况排序合并连接方法的步骤:如果连接的表没有排好序,先对Student表和SC表按连接属性Sno排序取Student表中第一个Sno,依次扫描SC表中具有相同Sno的元组An Introduction to Database System连接操作的实现(续)连接操作的实现(续)2002151212002151222002151232002
15、15124.200215121 1 92200215121 2 85200215121 3 88200215122 2 90200215122 3 80.排序-合并连接方法示意图An Introduction to Database System连接操作的实现(续)连接操作的实现(续)排序合并连接方法的步骤(续):当扫描到Sno不相同的第一个SC元组时,返回Student表扫描它的下一个元组,再扫描SC表中具有相同Sno的元组,把它们连接起来重复上述步骤直到Student表扫描完An Introduction to Database System连接操作的实现(续)连接操作的实现(续)vStu
16、dent表和SC表都只要扫描一遍v如果2个表原来无序,执行时间要加上对两个表的排序时间v对于2个大表,先排序后使用sort-mergejoin方法执行连接,总的时间一般仍会大大减少An Introduction to Database System连接操作的实现(续)连接操作的实现(续)3.索引连接索引连接(index join)方法方法v步骤:在SC表上建立属性Sno的索引,如果原来没有该索引对Student中每一个元组,由Sno值通过SC的索引查找相应的SC元组把这些SC元组和Student元组连接起来循环执行,直到Student表中的元组处理完为止An Introduction to D
17、atabase System连接操作的实现(续)连接操作的实现(续)4.Hash Join方法方法把连接属性作为hash码,用同一个hash函数把R和S中的元组散列到同一个hash文件中步骤:步骤:划分阶段(partitioningphase):对包含较少元组的表(比如R)进行一遍处理把它的元组按hash函数分散到hash表的桶中试探阶段(probingphase):也称为连接阶段(joinphase)对另一个表(S)进行一遍处理把S的元组散列到适当的hash桶中把元组与桶中所有来自R并与之相匹配的元组连接起来An Introduction to Database System连接操作的实现(
18、续)连接操作的实现(续)v上面hashjoin算法前提:假设两个表中较小的表在第一阶段后可以完全放入内存的hash桶中v以上的算法思想可以推广到更加一般的多个表的连接算法上An Introduction to Database System第九章第九章 关系系统及其查询优化关系系统及其查询优化9.1 关系数据库系统的查询处理关系数据库系统的查询处理 9.2 关系数据库系统的查询优化关系数据库系统的查询优化 9.3 代代 数数 优优 化化 9.4 物物 理理 优优 化化 9.5 小小 结结 An Introduction to Database System9.2 关系数据库系统的查询优化关系数
19、据库系统的查询优化v查询优化在关系数据库系统中有着非常重要的地位v关系查询优化是影响RDBMS性能的关键因素v由于关系表达式的语义级别很高,使关系系统可以从关系表达式中分析查询语义,提供了执行查询优化的可能性An Introduction to Database System9.2 关系数据库系统的查询优化关系数据库系统的查询优化v9.2.1 查询优化概述查询优化概述v9.2.2 一个实例一个实例 An Introduction to Database System9.2.1 查询优化概述查询优化概述v关系系统的查询优化v非关系系统An Introduction to Database Sys
20、tem查询优化概述(续)查询优化概述(续)v查询优化的优点不仅在于用户不必考虑如何最好地表达查询以获得较好的效率,而且在于系统可以比用户程序的“优化”做得更好(1)优化器可以从数据字典中获取许多统计信息,而用户程序则难以获得这些信息(2)如果数据库的物理统计信息改变了,系统可以自动对查询重新优化以选择相适应的执行计划。在非关系系统中必须重写程序,而重写程序在实际应用中往往是不太可能的。An Introduction to Database System查询优化概述(续)查询优化概述(续)(3)优化器可以考虑数百种不同的执行计划,程序员一般只能考虑有限的几种可能性。(4)优化器中包括了很多复杂的
21、优化技术,这些优化技术往往只有最好的程序员才能掌握。系统的自动优化相当于使得所有人都拥有这些优化技术An Introduction to Database System查询优化概述(续)查询优化概述(续)vRDBMS通过某种代价模型计算出各种查询执行策略的执行代价,然后选取代价最小的执行方案集中式数据库执行开销主要包括:磁盘存取块数(I/O代价)处理机时间(CPU代价)查询的内存开销I/O代价是最主要的分布式数据库总代价=I/O代价+CPU代价+内存代价通信代价An Introduction to Database System查询优化概述(续)查询优化概述(续)v查询优化的总目标:选择有效的
22、策略求得给定关系表达式的值使得查询代价最小(实际上是较小)An Introduction to Database System实际系统的查询优化步骤实际系统的查询优化步骤1.将查询转换成某种内部表示,通常是语法树2.根据一定的等价变换规则把语法树转换成标准(优化)形式3.选择低层的操作算法对于语法树中的每一个操作计算各种执行算法的执行代价选择代价小的执行算法4.生成查询计划(查询执行方案)查询计划是由一系列内部操作组成的。An Introduction to Database System9.2 关系数据库系统的查询优化关系数据库系统的查询优化v9.2.1 查询优化概述查询优化概述v9.2.2
23、 一个实例一个实例 An Introduction to Database System9.2.2 一个实例一个实例例3求选修了2号课程的学生姓名。用SQL表达:SELECTStudent.SnameFROMStudent,SCWHEREStudent.Sno=SC.SnoANDSC.Cno=2;n假定学生-课程数据库中有1000个学生记录,10000个选课记录n其中选修2号课程的选课记录为50个An Introduction to Database System一个实例(续)一个实例(续)v系统可以用多种等价的关系代数表达式来完成这一查询Q1=Sname(Student.Sno=SC.Sno
24、Sc.Cno=2(StudentSC)Q2=Sname(Sc.Cno=2(StudentSC)Q3=Sname(StudentSc.Cno=2(SC)An Introduction to Database System一个实例(续)一个实例(续)v一、第一种情况一、第一种情况 Q1=Sname(Student.Sno=SC.SnoSc.Cno=2StudentSC)1.计算广义笛卡尔积v把Student和SC的每个元组连接起来的做法:在内存中尽可能多地装入某个表(如Student表)的若干块,留出一块存放另一个表(如SC表)的元组。把SC中的每个元组和Student中每个元组连接,连接后的元组
25、装满一块后就写到中间文件上从SC中读入一块和内存中的Student元组连接,直到SC表处理完。再读入若干块Student元组,读入一块SC元组重复上述处理过程,直到把Student表处理完An Introduction to Database System一个实例(续)一个实例(续)v设一个块能装10个Student元组或100个SC元组,在内存中存放5块Student元组和1块SC元组,则读取总块数为=100+20100=2100块v其中,读Student表100块。读SC表20遍,每遍100块。若每秒读写20块,则总计要花105sv连接后的元组数为103104=107。设每块能装10个元组
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据库 系统 概论 第四 王珊萨师煊 chp
限制150内