1从案例中推导SQL优化的总体思路与误区.pdf

《1从案例中推导SQL优化的总体思路与误区.pdf》由会员分享，可在线阅读，更多相关《1从案例中推导SQL优化的总体思路与误区.pdf（65页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 基于案例学SQL优化第1周 从案例中推导从案例中推导SQL优优化的总体思路与误区化的总体思路与误区 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 法律声明【声明】本视频和幻灯片为炼数成金网络课程的教学资料，所有资料只能在课程内使用，丌得在课程以外范围散播，违者将可能被追究法律和经济责任。课程详情访问炼数成金培训网站 http:/ 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 梁敬彬，福富软件ITM产品线架构师及公司在聘数据库专家，ITPUB版主及社区专家，著有多本技术书籍，其新

2、书收获，不止Oracle深受广大读者喜爱。关于老师 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 当前课程进度 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第1周课程总览之1 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 缺乏对讹传的辨知力(count讹传)列没了怎么办大小表的时间增长性基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 1.COUNT(*)比COUNT(列)更慢！项目组必须用COUNT(列),不准用COUNT(*)，谁用扣谁钱！2.COUNT(*)用不到索引，COUNT(列)才能用到。

3、3.COUNT(*)是统计出全表的记录，是吞吐量的操作，肯定用不到索引。No no no!这些都是这些都是谣言，转谣言，转500次以上次以上你是会有麻烦的！你是会有麻烦的！关于COUNT的对话 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 点这里试试哪种写法更快？点这里试试哪种写法更快？COUNT对话正确不否的试验证明 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 COUNT(*)COUNT(列)哪哪种写法更快？种写法更快？不等价谈何哪种写法更快呢？不等价谈何哪种写法更快呢？COUNT对话正确不否结论 基于案例学SQL优化 讲师 梁敬彬 DATA

4、GURU与业数据分析社区 点这里了解更深入的信息！点这里了解更深入的信息！COUNT对话更深入的理解 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 结论：原来优化器里的算法是这么玩的，列的偏移量决定性能，列越靠后，访问的开销越大。由于count(*)的算法与列偏移量无关，所以count(*)最快，最快，count(最后列最后列)最慢最慢。结结论论：更更 深深 入入 信信息息 的的 结结果果图图示示 这个结论对我们开发设计，可是有启发哦，你要把这个结论对我们开发设计，可是有启发哦，你要把不常访问的列，放在什么位置？不常访问的列，放在什么位置？根据访问时间设置建表方式基于案

5、例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 缺乏对讹传的辨知力(SQL编写顺序讹传)基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区?基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 这些优化观点，这些优化观点，你也传播出去你也传播出去了吗？了吗？基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 和表连接顺序有关的流言蜚语和表连接顺序有关的流言蜚语 与表条件顺序有关的以讹传讹与表条件顺序有关的以讹传讹 关于SQL书写顺序的试验证明 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 结论：结论：基

6、于RBO或许是如此，基于CBO时代，早就不是如此了，过时了！关于SQL书写顺序的试验结论 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 缺乏对讹传的辨知力(in不exists之争)基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 不知道这些说法不知道这些说法被转了多少次，被转了多少次，我只能为你祈祷我只能为你祈祷平安了！平安了！基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 点点这里看看这里看看10g环境的情况环境的情况 关于IN不EXIST的试验证明(10g)什么什么不是什么什么的访问算法，此前都是filter！此种算法效率更

7、高只要加上非空条件，效率算法就是一样的基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 关于IN不EXIST的试验证明(11g)点这里瞧瞧点这里瞧瞧11g环境的情况环境的情况 11g的CBO时代，优化器并非想象的那样基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 关于IN不EXIST的试验结论 一般来说，anti的反连接算法比filter更高效，但是在10g时，Oracle的这个算法不完善，必须要制定非空，才可以让not in 用anti算法。在11g的时候，这个情况已经改变了，无论not in 还是not exists，无论是否列为空，都可以走到Or

8、acle比较先进高效的anti反连接算法。结论：结论：基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区“网上流传的名人名言“网上流传的名人名言80%以上都是假的”以上都是假的”亚拉伯罕亚拉伯罕 林肯林肯 最精彩的名人名言 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第1周课程总览之2 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 1.听听和全局临时表有关的故事听听和全局临时表有关的故事 2.讲述分区清理带给我们的好处讲述分区清理带给我们的好处 丌具备少做事

9、意识（设计中的少做事）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 3.体会分区消除带来的性能提升体会分区消除带来的性能提升 丌具备少做事意识（设计中的少做事）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 1.避免避免SQL中的函数调用有啥好处中的函数调用有啥好处 请看与开发中少做事相关的案例说明！请看与开发中少做事相关的案例说明！丌具备少做事意识（开发中的少做事）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 2.减少减少SQL中的函数调用有何思路中的函

10、数调用有何思路 丌具备少做事意识（开发中的少做事）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 3.集合写法能给性能提升多少集合写法能给性能提升多少 丌具备少做事意识（开发中的少做事）尽量考虑集合算法基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 4.只取你所需的列，访问视图变更快了只取你所需的列，访问视图变更快了 丌具备少做事意识（开发中的少做事）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 5.只取你所需的列，索引读无需回表了只取你所需的列，索引读无需回表了 丌具备少做事意识（开发中的少做事）读完索引后又重新访问表基于案

11、例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 6.只取你所需的列，表连接访问提速了只取你所需的列，表连接访问提速了 丌具备少做事意识（开发中的少做事）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 7.催人泪下，拖垮生产系统的超长慢催人泪下，拖垮生产系统的超长慢SQL 9.难以置信，让你不相信自己眼睛的难以置信，让你不相信自己眼睛的SQL 8.出乎意料，出乎意料，SQL优化改写的飞跃性想法优化改写的飞跃性想法 丌具备少做事意识（开发中的少做事）相对来说单条sql的性能是相对比较好的基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 是否

12、所有的数据都需迁移是否利用所有资源基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第1周课程总览之3 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 一定要注意使用场景比如count（*）存的就是8这个结果的值block大小依托场景基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 1.从某出账相关案例谈索引与更新从某出账相关案例谈索引与更新 0.35+0.48+0.21+0.34+0.36+15 2+0.67+1+0.45+0.72+0.74 丌会依据场景选择技

13、术（关于索引坏处考虑）索引都是这列的值和rowid组成基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 2.建索引引发锁表带来的悲惨故事建索引引发锁表带来的悲惨故事 3.建索引导致排序引发的性能风波建索引导致排序引发的性能风波 丌会依据场景选择技术（关于索引坏处考虑）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 还以为建分区一定会更快，真没想到还以为建分区一定会更快，真没想到 丌会依据场景选择技术（说说分区更慢的场景）where的分区条件一定要加基于案例学SQL优化 讲师 梁敬彬

14、DATAGURU与业数据分析社区 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 统计条数语句之谁是速度之王统计条数语句之谁是速度之王 从单车到飞船的性能优化之旅从单车到飞船的性能优化之旅 丌会依据场景选择技术（场景选择的经典案例）静态sql预编译基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第1周课程总览之4 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 未考虑将需求最小化（催人泪下的SQL续集）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 没想到，没想到，SQL故事的背后还引发更多故事故事的背后还

15、引发更多故事 请看SQL需求最小化的相关例子！基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 未考虑将需求最小化（考虑需求中多余之处）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第1周课程总览之5 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 忽略SQL改造等价性（看似等价其实丌等）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 insert all into ljb_tmp_transaction into ljb_tmp_session select*from dba_objects;1.Inse

16、rt 多表插入的玄与机多表插入的玄与机 insert into ljb_tmp_transaction as select*from dba_objects;insert into jb_tmp_session as select*from dba_objects;请看SQL写法丌等价的相关例子 一份复制，两份联贴不等价，同一时刻记录不一样基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 2.max及及min 写法的分与合写法的分与合 select min(object_id),max(object_id)from t;select max,min from (select

17、 max(object_id)max from t)a,(select min(object_id)min from t )b;请看SQL写法丌等价的相关例子 select max(object_id)from t;select min(object_id)from t;select min(object_id),max(object_id)from t;没有办法同时扫描叶子和块（主要针对索引）此时并不是同一时刻a，b同时一条，索引不会有笛卡尔积基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 3.in和和写法之间的同与异写法之间的同与异 请看SQL写法丌等价的相关例子 基

18、于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 4.count 列和列和*结论的对与错结论的对与错 请看SQL写法丌等价的相关例子 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 忽略SQL改造等价性（看似丌等价其实等价）基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 看似丌等价其实等价的例子 明白了吧？明白了吧？别买鱼了，就用冰箱里的牛肉来做美味晚餐吧。别买鱼了，就用冰箱里的牛肉来做美味晚餐吧。基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第1周课程总览之6 基于案例学SQL优化 讲师 梁敬彬 DATAG

19、URU与业数据分析社区 丌识需求乃顶级优化（需求优化)基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 丌识需求乃顶级优化（相关问答)基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 第一周课程到此结束，谢谢大家！第一周课程到此结束，谢谢大家！谢谢大家 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 咦，老师，本周课程上完了？嗯，是的，上完了，有收获吧？谢谢，收获很大!不过您不是说总体思路和误区吗，怎么只说误区就结束了？你想要听总体思路啊？是啊！你把误区都纠正了，总体思路不就出来了吗？?只上了”SQL误区”漏了”总体思路”吗 基于案

20、例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 不就是这个吗，请看：不就是这个吗，请看：SQL优化的总体思路 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 哦，我明白了，原来如此啊。其实就是知识+意识，从下周开始，我们开始围绕各种案例，讲述优化中所涉及的各种知识和所具备的各种意识吧。本周的课程或许有些同学还无法完全理解明白，不过没关系，能有个印象就很好了，相信经过一段时间的学习后，回头再回顾老师的课堂视频，试验老师所提供的各种脚本，大家一定会豁然开朗的。谢谢老师！豁然开朗 基于案例学SQL优化 讲师 梁敬彬 DATAGURU与业数据分析社区 炼数成金逆向

21、收费式网络课程 Dataguru（炼数成金）是与业数据分析网站，提供教育，媒体，内容，社区，出版，数据分析业务等服务。我们的课程采用新兴的互联网教育形式，独创地发展了逆向收费式网络培训课程模式。既继承传统教育重学习氛围，重竞争压力的特点，同时又发挥互联网的威力打破时空限制，把天南地北志同道合的朋友组织在一起交流学习，使到原先孤立的学习个体组合成有组织的探索力量。并丏把原先动辄成千上万的学习成本，直线下降至百元范围，造福大众。我们的目标是：低成本传播高价值知识，构架中国第一的网上知识流转阵地。关于逆向收费式网络的详情，请看我们的培训网站 http:/ DATAGURU专业数据分析网站 FAQ时间 65