第三语法分析.pptx
《第三语法分析.pptx》由会员分享,可在线阅读,更多相关《第三语法分析.pptx(107页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、13.1 语法分析的若干问题语法分析器的两个重要作用:根据词法分析器提供的记号流,为语法正确的输入构造分析树(或语法树),这是本章重点,在以后各节中详细讨论;检查输入中的语法(可能包括词法)错误,并调用出错处理器进行适当处理,下边简单介绍语法错误处理的基本原则,而在以后的讨论中忽略此问题。第1页/共107页23.1 语法分析的若干问题语法错误的处理原则1.源程序中可能出现的错误两类:语法错误和语义错误词法错误如非法字符或拼写错关键字、标识符等intege20times语法错误指结构出错,如少分号、begin/end不配对等beginx:=a+by:=x;静态语义错误:如类型不一致、参数不匹配等
2、a,b:integer;x:array1.10ofinteger;x:=a+b;动态语义错误(逻辑错误):如死循环、除数为变量零等while(t).;a:=a/b;第2页/共107页33.1 语法分析的若干问题大多数错误的诊断和恢复集中在语法分析阶段。一个原因是大多数错误是语法错误,另一个原因是语法分析方法的准确性,它们能以非常有效的方法诊断语法错误。编译时想要准确诊断语义或逻辑错误有时是很困难的。2.语法错误处理的目标对语法错误的处理,一般希望达到以下基本目标:清楚而准确地报告错误的出现,地点正确、不漏报、不错报也不多报;迅速地从每个错误中恢复过来(以便分析继续进行);不应使对语法正确的源程
3、序的分析速度降低太多。第3页/共107页43.1 语法分析的若干问题3.语法错误的基本恢复策略紧急方式恢复:抛弃若干输入,直到遇到同步记号。短语级恢复:采用串替换的方式对剩余输入进行局部纠正(抛弃插入)。出错产生式:用出错产生式捕捉错误(预测错误)。预置型的短语级恢复方式。全局纠正:对错误输入序列x,找相近序列y,使得x变换成y所需的修改、插入、删除次数最少。第4页/共107页53.1 语法分析的若干问题例3.1下述两条是有语法错误的语句,其中第一条赋值句结束时忘记加分号,采用紧急恢复方式和短语级恢复方式的可能结果分别如下所示。x:=a+by:=c+d;紧急方式:x:=a+b+d;-丢弃b后若
4、干记号,直到遇到+短语级恢复:x:=a+b;-加入分号,使之成为一个赋值句y:=c+d;第5页/共107页63.2 上下文无关文法(CFG)CFG的定义与表示上下文无关文法,ContextFreeGrammar,CFG定义3.1CFG是一个四元组:G=(N,T,P,S),其中(1)N是非终结符(Nonterminals)的有限集合;(2)T是终结符(Terminals)的有限集合,且NT=;(3)P是产生式(Productions)的有限集合,形如:A,其中AN(左部),(NT)*(右部),若=,则称A为空产生式(也可以记为A);(4)S是非终结符,称为文法的开始符号(Startsymbol)
5、。第6页/共107页73.2 上下文无关文法(CFG)例3.2简单算术表达式的上下文无关文法可表示如下:N=E T=+,*,(,),-,idS=EP:EE+E(1)EE*E(2)E(E)(3)(G3.1)E-E(4)Eid(5)1.产生式的一般读法记号读作“定义为”或者“可导出”。“EE+E”表述为“算术表达式定义为两个算术表达式相加”;或者“一个算术表达式加上另一个算术表达式,仍然是一个算术表达式”。第7页/共107页83.2 上下文无关文法(CFG)2.由产生式集表示CFG前提:若文法正确结论:文法开始符号S是第一个产生式的左部;N是可以出现在产生式左边符号的记号集合;T是绝不出现在产生式
6、左边符号的记号集合;P:EE+E(1)EE*E(2)E(E)(3)E-E(4)Eid(5)产生式表示也被称为巴克斯范式(Backus-NaurForm,BNF),其中用:=表示S=EN=ET=+,*,(,),-,id第8页/共107页93.2 上下文无关文法(CFG)3.终结符与非终结符书写上的区分(a)用大小写区分:Eid(b)用区分:EidEE+E(c)用区分:+教材约定:大写英文字母A、B、C表示非终结符;小写英文字母a、b、c表示终结符;小写希腊字母、表示任意文法符号序列第9页/共107页103.2 上下文无关文法(CFG)4.产生式的缩写形式当多个产生式的左部非终结符相同时,可合并为
7、一个产生式。新的产生式的左部是此非终结符,右部是所有原来右部的或运算(并集合)。例3.3G3.1可以重写为如下形式:E E+E(1)|E*E(2)|(E)(3)(G3.2)|-E(4)|id(5)用“|”连接的每个右部称为一个候选项,具有平等的权利。BNF如何表示?P:E E+E(1)E E*E(2)E (E)(3)E -E(4)E id(5)第10页/共107页113.2 上下文无关文法(CFG)CFG产生语言的基本方法推导CFG(产生式)通过推导的方法产生语言。通俗地讲,产生式产生语言的过程是从开始符号S开始,对产生式左部的非终结符反复地使用产生式:将产生式左部的非终结符替换为右部的文法符
8、号序列(展开产生式,用标记=表示),直到得到一个终结符序列。例3.4用(G3.2)产生终结符序列-(id+id)可如下:EE+E(1)|E*E(2)|(E)(3)(G3.2)|-E(4)|id(5)E=-E by(4)=-(E)by(3)=-(E+E)by(1)=-(id+E)by(5)=-(id+id)by(5)第11页/共107页123.2 上下文无关文法(CFG)定义3.2利用产生式产生句子的过程中,将产生式A的右部代替文法符号序列A中的A得到的过程,称A直接推导出,记作:A=。若对于任意文法符号序列1,2,.n,均有1=2=.=n,则称此过程为零步或多步推导,记为:1=*n,其中1=n
9、的情况为零步推导。若1n,即推导过程中至少使用一次产生式,则称此过程为至少一步推导,记为:1=+n。两点注意:,有=*,即推导具有自反性;若=*,=*,则=*,即推导具有传递性。第12页/共107页133.2 上下文无关文法(CFG)定义3.3由CFGG所产生的语言L(G)被定义为:L(G)=S=+andT*,L(G)称为上下文无关语言(ContextFreeLanguage,CFL),称为句子。若S=*,(NT)*,则称为G的一个句型。定义3.4在推导过程中,若每次直接推导均替换句型中最左边的非终结符,则称为最左推导,由最左推导产生的句型被称为左句型。类似可定义最右推导与右句型,最右推导也被
10、称为规范推导。E=-E=-(E)=-(E+E)=-(id+E)=-(id+id)1234566是句子,所有i(i=1.6)均是句型。第13页/共107页14上次课总结语法分析器作用语法错误处理CFG的定义与表示推导(最左、最右推导)、句子、句型第14页/共107页153.2 上下文无关文法(CFG)推导、分析树与语法树E=-E=-(E)=-(E+E)=-(id+E)=-(id+id)推导产生句子的方式不直观。分析树是推导的图形直观表示,同时反映语言结构的实质和推导过程。定义3.5 对CFG G的句型,分析树被定义为具有下述性质的一棵树。(1)根由开始符号所标记;(2)每个叶子由一个终结符、非终
11、结符、或标记;(3)每个内部结点由一个非终结符标记;(4)若A是某内部节点的标记,且X1,X2,.,Xn是该节点从左到右所有孩子的标记,则AX1X2.Xn是一个产生式。若A,则标记为A的结点可以仅有一个标记为的孩子。第15页/共107页163.2 上下文无关文法(CFG)分析树与语言和文法的关系:每一直接推导(每个产生式),对应一棵仅有父子关系的子树,即产生式左部非终结符“长出”右部的孩子;分析树的叶子,从左到右构成G的一个句型。若叶子仅由终结符标记,则构成一个句子。例3.5再考察-(id+id)的推导过程。E=-E=-(E)=-(E+E)=-(id+E)=-(id+id)最左推导和最右推导的
12、中间过程对应的分析树可能不同,但最终的分析树相同,因为最终是同一个句子第16页/共107页173.2 上下文无关文法(CFG)分析树既反映了产生句型的推导过程,又反映了句型的结构。在更多的情况下,仅关注句型结构,而忽略推导过程。定义3.6对CFGG的句型,表达式的语法树被定义为具有下述性质的一棵树:(1)根与内部节点由表达式中的操作符标记;(2)叶子由表达式中的操作数标记;(3)用于改变运算优先级和结合性的括弧,被隐含在语法树的结构中。语法树与分析树的最根本区别在于内部节点(包括根节点):分析树的内部节点是非终结符;语法树的内部节点是操作符(运算符);或者说语法树中省略了反映分析过程的非终结符
13、。第17页/共107页183.2 上下文无关文法(CFG)例3.6句子-(id+id)和句型ifCthens1elses2分析树:左部非终结符“产生”右部文法符号序列;语法树:操作符(运算)作用于操作数(运算对象);习惯上它们分别被称为具体语法树和抽象语法树。第18页/共107页193.2 上下文无关文法(CFG)二义性与二义性的消除二义性问题:一个句子可能对应多于一棵分析树例3.7文法G3.2为EE+E|E*E|(E)|-E|id句子id+id*id和id+id+id可能的分析树有:第19页/共107页203.2 上下文无关文法(CFG)定义3.7若文法G对同一句子产生不止一棵分析树,则称G
14、是二义的。原因:在产生句子的过程中某些直接推导有多于一种选择注意:1.一个句子有多于一棵分析树,仅与文法和句子有关,与采用的推导方法无关;2.文法中缺少对文法符号优先级和结合性的规定。“悬空(dangling)else”问题S ifCthenS(1)|ifCthenSelseS(2)|id:=E(3)(G3.3)CE=E|EE(4).(6)EE+E|-E|id|n(7).(10)第20页/共107页213.2 上下文无关文法(CFG)例3.8条件语句ifx0thenx:=5elsex:=-5if x0 then x:=5 else x:=-5else与离它远的then匹配if x0 then
15、x:=5 else x:=-5else与离它近的then匹配第21页/共107页223.2 上下文无关文法(CFG)文法二义不能说明它所产生的语言一定是二义的。消除语言二义有两种方法:改写二义文法为非二义文法;规定二义文法中符号的优先级和结合性。改写例3.9与G3.2等价的非二义文法:EE+T|TTT*F|F(G3.4)F(E)|-F|id问题:如何改写?EE+E|E*E|(E)(G3.2)|-E|id第22页/共107页233.2 上下文无关文法(CFG)观察结论:新引入的非终结符限制每一步直接推导均有唯一选择;最终分析树的形状,仅与文法有关,而与推导方法无关;非终结符的引入,增加了推导步骤
16、(分析树增高);越接近S的文法符号的优先级越低。(如EE+T)对于AA,若A在终结符左边出现(即终结符在中),则A产生式具有左结合性质。改写二义文法的关键步骤:1.引入新的非终结符,增加一个子结构并提高一级优先级;2.递归非终结符在终结符左边,运算具有左结合性,否则具有右结合性。第23页/共107页243.2 上下文无关文法(CFG)例3.10改写二义文法G3.2为G3.4:引入新的非终结符,增加一个子结构并提高一级优先级;递归非终结符在终结符左边,运算具有左结合性,否则具有右结合性。1.优先级:+*(),-,id2.结合性:左结合+,*右结合-无结合id3.非终结符与运算:E:+(E产生式,
17、左递归)T:*(T产生式,左递归)F:-,(),id(F产生式,右递归)E E+E(1)|E*E(2)|(E)(3)|-E(4)|id(5)E E+T|TT T*F|FF (E)|-F|id第24页/共107页253.2 上下文无关文法(CFG)“悬空else”问题:在复合if语句中,可能then多于else,使得else不知与哪个then结合。一般原则是右结合,即else与左边最靠近的then结合。改写文法的根据是将S分为完全匹配(MS)和不完全匹配(UMS)两类,并且在UMS中规定else右结合。SMS(1)|UMS(2)MSifCthenMSelseMS(3)|id:=E(4)UMSif
18、CthenS(5)|ifCthenMSelseUMS(6)CE=E|EE(7).(9)EE+T|T(10).(11)T(E)|-T|id|n(12).(15)S if C then S|if C then S else S|id:=EC E=E|EEE E+E|-E|id|n第25页/共107页263.2 上下文无关文法(CFG)SMS|UMS(1).(2)MSifCthenMSelseMS|id:=E(3).(4)UMSifCthenS|ifCthenMSelseUMS(5).(6)(G3.5)CE=E|EE(7).(9)EE+T|T(10).(11)T(E)|-T|id|n(12).(15
19、)if x0 then x:=5 else x:=-5第26页/共107页273.2 上下文无关文法(CFG)SMS|UMS(1).(2)MSifCthenMSelseMS|id:=E(3).(4)UMSifCthenS|ifCthenMSelseUMS(5).(6)(G3.5)CE=E|EE(7).(9)EE+T|T(10).(11)T(E)|-T|id|n(12).(15)if x0 then x:=5 else x:=-5第27页/共107页283.2 上下文无关文法(CFG)规定优先级和结合性二义文法的优点:1.比非二义文法容易理解;2.分析效率高(分析树低,直接推导步骤少)。YACC
20、为二义文法规定优先级和结合性:%left+%left*%right-EE+E|E*E|(E)|-E|idE E+T|TT T*F|FF (E)|-F|id第28页/共107页293.2 上下文无关文法(CFG)修改语言的语法1.明确给出结束标志,如Ada中用endif,于是有:ifx0thenx:=5;endif;elsex:=-5;endif;ifx0thenx:=5;elsex:=-5;endif;endif;if x0thenx:=5;endif;elsex:=-5;endif;2.给表达式加括号,如Pascal中逻辑和算术运算:(a+b)(c*d)if x0then x:=5;else
21、 x:=-5;end if;end if;第29页/共107页303.3 语言与文法简介文法的重要作用:1.给出精确、易于理解的语言结构说明;2.以文法为基础的语言,便于加入新的、或修改、删除旧的语言结构;3.有些类别的文法,可以自动生成高效的分析器。本节从理论的角度对文法进行简单地讨论。讨论建立在形式语言与自动机的理论之上,且仅引用结论而忽略数学的证明,有兴趣的同学可以参阅相关文献。希望通过本节的讨论,对文法的分类和它们在编译器构造中的作用有一定的了解,同时初步窥探计算机科学的理论基础。第30页/共107页313.3 语言与文法简介正规式与上下文无关文法1.正规式到CFG的转换推论3.1正规
22、式描述的语言结构均可用CFG描述,反之不一定从正规式到CFG的对应关系:构造正规式的NFA;若0为初态,则A0为开始符号;对于move(i,a)=j,引入产生式AiaAj;对于move(i,)=j,引入产生式AiAj;若i是终态,则引入产生式Ai。例3.11从正规式r=(a|b)*abb的NFA构造CFG:A0aA0|bA0|aA1A1bA2A2bA3A3经验的方法:A HTH|Ha|HbT abb第31页/共107页323.3 语言与文法简介2.为什么用正规式而不用CFG描述词法?词法规则简单,用正规式描述已足够;正规式的表示比CFG更直观、简洁、易于理解;有限自动机的构造比下推自动机简单,
23、且分析效率高;区分词法和语法,为编译器前端的模块划分提供方便。贯穿词法分析和语法分析始终的思想:语言的描述和语言的识别是表示一个语言的两个不同侧面,二者缺一不可;(语言、文法、自动机)用正规式和CFG描述的语言,对应的识别方法(自动机)不同;正规式适合描述线性结构,如标识符、关键字、注释等;CFG适合描述具有嵌套(层次)性质的非线性结构,如不同结构的句子if-then-else、while-do等。第32页/共107页333.3 语言与文法简介上下文有关语言ContextSensitiveLanguage,CSL程序设计语言中除了CFG可以描述的结构之外,还有一些是CFG无法描述的所谓上下文有
24、关的结构。典型的这类语言结构包括:变量的声明与引用、过程调用时形参与实参的一致性检查等。描述它们的文法被称为上下文有关文法(ContextSensitiveGrammar,CSG)。第33页/共107页343.3 语言与文法简介例3.12不能用CFG描述的语言:L1=c|(a|b)*(标识符声明与引用一致性的抽象)L2=anbmcndm|n1和m1(形参与实参一致性的抽象)L3=anbncn|n1(计数问题的抽象)相近的CFL:L1=cr|(a|b)*L2=anbmcmdn|n1,m1L2=anbncmdm|n1,m1L3=ambmcn|m,n1SaSa|bSb|cSaSd|aAd AbAc|
25、bcSAB AaAb|ab BcBd|cdAAC AaAb|ab CcC|c第34页/共107页35上次课总结分析树语法树二义性与二义性的消除原因:文法符号缺乏优先级和结合性消除方法改写二义文法为非二义文法为文法符号规定优先级和结合性改变语言的结构或书写方式正规式到CFG的转换上下文有关语言第35页/共107页363.3 语言与文法简介计数问题L3=anbncn|n1CSLL3=ambmcn|m,n1CFLL3=akbmcn|k,m,n1正规集命题:L3不是正规集,因为构造不出可以识别L3的DFA。证明:(反证)假设L3是正规集,则可构造n个状态的DFAD,它接受L3;考察D读完,a,aa,.
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 第三 语法分析
限制150内