第03章文法和语言.ppt
《第03章文法和语言.ppt》由会员分享,可在线阅读,更多相关《第03章文法和语言.ppt(69页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、第03章文法和语言现在学习的是第1页,共69页本章知识点本章知识点(内容内容)引言和预备知识引言和预备知识文法和语言的形式定义文法和语言的形式定义文法的类型文法的类型上下文无关文法及其语法树上下文无关文法及其语法树上下文无关文法的句型分析上下文无关文法的句型分析有关文法实用中的一些说明有关文法实用中的一些说明现在学习的是第2页,共69页3.1文法的直观概念和文法的直观概念和语言概述语言概述当我们表述一种语言时,无非是说明这种语言的句当我们表述一种语言时,无非是说明这种语言的句子,如果语言只含有有穷多个句子,则只需列出句子,如果语言只含有有穷多个句子,则只需列出句子的有穷集就行了,但对于含有无穷
2、句子的语言来子的有穷集就行了,但对于含有无穷句子的语言来讲,存在着如何给出它的有穷表示的问题。讲,存在着如何给出它的有穷表示的问题。以自然语言为例,人们无法列出全部句子,但是人们可以自然语言为例,人们无法列出全部句子,但是人们可以给出一些规则,用这些规则来说明以给出一些规则,用这些规则来说明(或者定义或者定义)句子的句子的组成结构。组成结构。现在学习的是第3页,共69页“我是大学生我是大学生”。是汉语的一个句子是汉语的一个句子句子句子=主语主语谓语谓语主语主语=代词代词名词名词代词代词=我我你你他他名词名词=王明王明大学生大学生工人工人英语英语谓语谓语=动词动词直接宾语直接宾语动词动词=是是学
3、习学习直接宾语直接宾语=代词代词名词名词有了一组规则以后,有了一组规则以后,不断地用不断地用=的的右边代替左边右边代替左边,就可以导出句子。就可以导出句子。现在学习的是第4页,共69页“我是大学生我是大学生”的构成符合上述规则,而的构成符合上述规则,而“我大学生是我大学生是”不符合上述规则,我们说它不符合上述规则,我们说它不是句子。不是句子。这些规则成为我们判别句子结构合法与否这些规则成为我们判别句子结构合法与否的依据,换句话说,这些规则看成是一种的依据,换句话说,这些规则看成是一种元语言,用它描述汉语。元语言,用它描述汉语。这里仅仅涉及汉语句子的结构描述。其中这里仅仅涉及汉语句子的结构描述。
4、其中一种描述元语言称为文法。一种描述元语言称为文法。现在学习的是第5页,共69页语语 言言 概概 述述语言是由句子组成的集合,是由一组符号所构成的集合。语言是由句子组成的集合,是由一组符号所构成的集合。汉语汉语-所有符合汉语语法的句子的全体所有符合汉语语法的句子的全体英语英语-所有符合英语语法的句子的全体所有符合英语语法的句子的全体程序设计语言程序设计语言-所有该语言的程序的全体所有该语言的程序的全体 语法语法 Syntax语言研究的三个方面语言研究的三个方面 语义语义 Semantics 语用语用 Pragmatics现在学习的是第6页,共69页如如果果不不考考虑虑语语义义和和语语用用,即即
5、只只从从语语法法这这一一侧侧面面来来看看语语言言,这这种意义下的语言称作形式语言。种意义下的语言称作形式语言。形式语言抽象地定义为一个数学系统。形式语言抽象地定义为一个数学系统。“形形式式”是是指指这这样样的的事事实实:语语言言的的所所有有规规则则只只以以什什么么符号串能出现的方式来陈述。符号串能出现的方式来陈述。形形式式语语言言理理论论是是对对符符号号串串集集合合的的表表示示法法、结结构构及及其其特特性性的的研研究。究。是程序设计语言语法分析研究的基础。是程序设计语言语法分析研究的基础。现在学习的是第7页,共69页3.2 有关定义和记号的回顾有关定义和记号的回顾符号和符号串符号和符号串符号:
6、符号:可以相互区别的记号(元素)。可以相互区别的记号(元素)。字母表字母表:符号(元素)的非空有穷集合(符号集)。符号(元素)的非空有穷集合(符号集)。符号串:符号串:由字母表由字母表 中的符号组成的任何有穷序列称为该字母表上的符号中的符号组成的任何有穷序列称为该字母表上的符号串。串。1.空符号串空符号串(没有没有符号的符号串符号的符号串)是是 上的符号串上的符号串 2.若若x是是 上的符号串,上的符号串,a是是 的元素,则的元素,则xa是是 上的符号串上的符号串 3.y是是 上的符号串,当且仅当它可以由上的符号串,当且仅当它可以由1和和2导出。导出。例如:例如:=a,b=a,b ,a,b,a
7、a,ab,aabba ,a,b,aa,ab,aabba都都是是 上的符号串上的符号串现在学习的是第8页,共69页 符号串符号串s的头(前缀):的头(前缀):移走符号串移走符号串s尾部的零个或多于零个符号尾部的零个或多于零个符号得到的符号串。得到的符号串。如:如:b是符号串是符号串banana的一个前缀。的一个前缀。符号串符号串s的尾(后缀):的尾(后缀):删去符号串删去符号串s头部的零个或多于零个符号得头部的零个或多于零个符号得到的符号串。到的符号串。如如:nana是符号串是符号串banana的一个后缀。的一个后缀。符号串符号串s的子串:的子串:从从s中删去一个前缀和一个后缀得到的符号串。中删
8、去一个前缀和一个后缀得到的符号串。如如:ana是符号串是符号串banana的一个子串。的一个子串。现在学习的是第9页,共69页对于每个符号串对于每个符号串s,s和和两者两者都都是符号串是符号串s的前缀,后缀和子串。的前缀,后缀和子串。符号串符号串s的真前缀,真后缀,真子串:的真前缀,真后缀,真子串:任何非空符号串任何非空符号串 x,相应地,相应地,是是s的前缀,后缀或子串,并且的前缀,后缀或子串,并且 s x 符号串的运算符号串的运算符号串的长度:符号串的长度:符号串中符号的个数符号串中符号的个数.符号串符号串s的长度记为的长度记为|s|。的长度为的长度为0连接:连接:符号串符号串x x、y
9、y的连接的连接,是把是把y y的符号写在的符号写在x x的符号之后得到的符号之后得到的符号串的符号串xy xy 如如 x=ab,y=cd x=ab,y=cd 则则 xy=abcd xy=abcd 有有a=a a=a 方幂:方幂:符号串自身连接符号串自身连接n n次得到的符号串次得到的符号串 a an n 定义为定义为 aaaaaa naa n个个a a的连接的连接 a a1 1=a,a=a,a2 2=aa=aa则则a a0 0=现在学习的是第10页,共69页符号串集合符号串集合:若集合若集合A中所有元素都是某字母表中所有元素都是某字母表 上的符号串,则上的符号串,则称称A为字母表为字母表 上的
10、符号串集合。上的符号串集合。两个符号串集合两个符号串集合A和和B的乘积的乘积 定义为定义为 AB=xy|xxy|x A A且且y y B B 若若 集合集合A=ab,cdeab,cde ,B=0,10,1 则则 AB=ab1,ab0,cde0,cde1ab1,ab0,cde0,cde1 使用使用 *表示表示 上的一切符号串(包括上的一切符号串(包括)组成的集合。)组成的集合。*称为称为的闭包的闭包。上的上的除除外外的所有符号串组成的集合记为的所有符号串组成的集合记为+。+称为称为的正闭包的正闭包。现在学习的是第11页,共69页例:例:=a,b=a,b *=,a,b,aa,ab,ba,bb,aa
11、a,aab,=,a,b,aa,ab,ba,bb,aaa,aab,+=a,b,aa,ab,ba,bb,aaa,aab,=a,b,aa,ab,ba,bb,aaa,aab,现在学习的是第12页,共69页有关定义和记号有关定义和记号语言语言是由句子组成的集合,是由一组符号所构成的集合。换言是由句子组成的集合,是由一组符号所构成的集合。换言之,字母表之,字母表 上上的一个语言是的一个语言是 上的一些符号串的集合上的一些符号串的集合 (字母表字母表 上上的每个语言是的每个语言是*的一个子集的一个子集)。例如:例如:字母表字母表=a,b,=a,b,*=,a,b,aa,ab,ba,bb,aaa,aab,=,a
12、,b,aa,ab,ba,bb,aaa,aab,集合集合ab,aabb,aaabbb,ab,aabb,aaabbb,a,an nb bn n,或表示为或表示为w|ww|w*且且w=aw=an nb bn n,n1,n1为为字母表字母表 上上的一个语言。的一个语言。集合集合a,aa,aaa,a,aa,aaa,或或表示为表示为w|ww|w*且且w=aw=an n,n1,n1 为为字母表字母表 上上的一个语言。的一个语言。是一个语言。是一个语言。即即 是一个语言。是一个语言。现在学习的是第13页,共69页语言语言上上的有关运算的有关运算 设设L是(是(上的)一个语言,上的)一个语言,M是(是(上的)一
13、个语言,上的)一个语言,语言语言L和和M的并,交,差,补的并,交,差,补是一个语言。是一个语言。语言语言L和和M的并为的并为 L M,是一个语言是一个语言:w|w is in L or is in w|w is in L or is in M M 如:如:L1=a,b,=a,b,y,z My,z M1 1=0,1,2=0,1,28,9 8,9 L1 M1 1=a,b,=a,b,y,z y,z,0,1,20,1,28,9 8,9 语言语言L和和M的连接的连接是一个语言,记是一个语言,记为为 LM LM=st|sst|sL且且 t tM 如:如:L1M1=a1,b1,=a1,b1,y1,z0,z1
14、,a2,b2y1,z0,z1,a2,b2a9a9z9 z9 有有L =L=L。L的的n次连接次连接Ln=LL.L 现在学习的是第14页,共69页 语言语言L的的 闭包闭包记记为为 L*,L*=L0 L1 L2 L0=Ln=L Ln-1=Ln-1 L,n 1 语言语言L的正的正 闭包闭包记记为为 L+L+=L1 L2 L3.L*=L+如:如:L1 =a,b,=a,b,y,zy,z,M M1 1=0,1,2=0,1,28,9 8,9 (L1 M1 1)=a,b,=a,b,y,z y,z,0,1,20,1,28,98,9 (L1 M1 1)*=a,b,=a,b,y,z,0,1,2 y,z,0,1,2
15、8,9,8,9,aa,0a,xyz,6789st.L1(L1 M1 1)*=所有字母打头的字母和数字符号串所有字母打头的字母和数字符号串 现在学习的是第15页,共69页3.3 文法和语言的形式定义文法和语言的形式定义一、如何来描述一种语言一、如何来描述一种语言如果语言是如果语言是有穷有穷的(只含有有穷多个句子),可以将句子逐一列出的(只含有有穷多个句子),可以将句子逐一列出来表示来表示如果语言是如果语言是无穷无穷的,找出语言的有穷表示。语言的有穷表示有两个途的,找出语言的有穷表示。语言的有穷表示有两个途经:经:1.1.生成方式生成方式 (文(文法)法):语言中的每个句子可以用严格定义的规则来构
16、造。语言中的每个句子可以用严格定义的规则来构造。2.2.识别方式识别方式(自动机)(自动机):用一个过程,当输入的一任意串属于用一个过程,当输入的一任意串属于语言时,该过程经有限次计算后就会停止并回答语言时,该过程经有限次计算后就会停止并回答“是是”,若不,若不属于,要么能停止并回答属于,要么能停止并回答“不是不是”,(要么永远继续下去。),(要么永远继续下去。)什么现在学习的是第16页,共69页文法即是用生成方式描述语言的:文法即是用生成方式描述语言的:语言中的每个句子可以用严格定义的规则来构造语言中的每个句子可以用严格定义的规则来构造.下面给出文法的定义,进而在下面给出文法的定义,进而在文
17、法的定义的基础上,文法的定义的基础上,给给出出推导的概念,句型、句子和语言的定义。推导的概念,句型、句子和语言的定义。现在学习的是第17页,共69页二、文法的定义二、文法的定义文法文法G定义为四元组定义为四元组(VN,VT,P,S)其中:其中:VN为非终结符号为非终结符号(或语法实体,或变量或语法实体,或变量)集;集;VT为终结符号集;为终结符号集;P为产生式为产生式(也称规则也称规则)的集合;的集合;VN,VT和和P是是非空有穷集。非空有穷集。S称作识别符号或开始符号,它是一个非终结符,至少要在一条产生式称作识别符号或开始符号,它是一个非终结符,至少要在一条产生式中作为左部出现。中作为左部出
18、现。VN和和VT不含公共的元素,即不含公共的元素,即VN VT=用用V表示表示VN VT,称为文法,称为文法G的字母表或字汇表。的字母表或字汇表。规则规则,也称重写规则、产生式或生成式,是形如,也称重写规则、产生式或生成式,是形如或或=的的(,)有序对,其中有序对,其中是字母表是字母表V的正闭包的正闭包V+中的一个符号,且中的一个符号,且至少至少包含一个非终结符包含一个非终结符;是是V*中的一个符号。中的一个符号。称为规则的左部,称为规则的左部,称称作规则的右部。作规则的右部。现在学习的是第18页,共69页例:例:文法文法G=(VN,VT,P,S)VN=S VT=0,1 P=S0S1,S01
19、S为开始符号为开始符号现在学习的是第19页,共69页例:例:文法文法G=(VN,VT,P,S)VN=标识符,字母,数字标识符,字母,数字VT=a,b,c,x,y,z,0,1,9P=a,zz 0,0,99 S=现在学习的是第20页,共69页三、文法的写法三、文法的写法 1.G1.G:SaASaAb Aab Aab AaA AaAb A A 2.GS 2.GS:SaASaAb Aab AaA Aab AaAb A A 3.3.GSGS:SaASaAb Aab|aA Aab|aAb|一般用写法一般用写法 3 3现在学习的是第21页,共69页元符号元符号:=|习惯表示习惯表示 大写字母:大写字母:非终
20、结符非终结符 小写字母:小写字母:终结符终结符如:如:S AB A Ax|y B z现在学习的是第22页,共69页四、四、直接推导、推导的定义直接推导、推导的定义1.直接推导直接推导 是文法是文法G G的产生式,若有的产生式,若有v,wv,w满足:满足:v=,w=,v=,w=,其中其中VV*,V,V*则称则称v v直接推导直接推导到到w,w,也称也称w w是是v v的直接推导,的直接推导,记作记作 v v w w 也称也称w w直接归约直接归约到到v v例:例:GSGS:S0S1,S01 0S100S1100S11000S111000S11100001111 S 0S1现在学习的是第23页,共
21、69页 +*2.推导推导:若存在若存在vw0w1.wn=w,(n0)则记为则记为v=w,称,称v推导出推导出w,或,或w归约到归约到v若有若有v=w,或,或v=w,则记为则记为v=w+*现在学习的是第24页,共69页例:例:GSGS:S0S1,S01S0S10S100S1100S11000S111000S11100001111 S 0S100S11000S11100001111 S=00001111 S=S 00S11=00S11+*现在学习的是第25页,共69页五、句型、句子的定义五、句型、句子的定义1.句型句型 有文法有文法G,若,若S=x,则称,则称x是文法是文法G的句型。的句型。即:即
22、:从开始符号推导出的任意符号串。从开始符号推导出的任意符号串。2.句子句子 有文法有文法G,若,若S=x,且,且xVVT T*,则称,则称x是文法是文法G的句子。的句子。即:即:从开始符号推导出的终结符号串。从开始符号推导出的终结符号串。例:例:G G:S0S1,S01 S 0S100S11000S11100001111S 01 G的的句型句型有:有:S,0S1,00S11,000S111,00001111,01 G的的句子句子有:有:00001111,01*现在学习的是第26页,共69页例:例:GE E:EE+T|TEE+T|T TT*F|F TT*F|F F(E)|a F(E)|aE EE
23、+TT+TF+Ta+Ta+T*Fa+F*Fa+a*Fa+a*a句子:用符号句子:用符号a,+,*,(和和)构成的算术表达式构成的算术表达式现在学习的是第27页,共69页六、语言的定义六、语言的定义由文法由文法G生成的生成的语言语言记为记为L(G),它是文法,它是文法G的的一切句子的集合一切句子的集合:L(G)=x|S=x,其中,其中S为文法的开始符为文法的开始符号,且号,且x VVT T*例:例:GS:S0S1,S01 L(G)=0n1n|n1*现在学习的是第28页,共69页七、七、文法的等价文法的等价若若L(G1)=L(G2),则称文法),则称文法G1和和G2是等价的。是等价的。如文法如文法
24、G G1AA:A0R A0R 与与 G G2SS:S0S1 S0S1 等价等价 A01 S01A01 S01 RA1 RA1现在学习的是第29页,共69页3.4 文法的类型文法的类型 通过对产生式施加不同的限制,通过对产生式施加不同的限制,Chomsky(乔姆斯基)乔姆斯基)将文法分为四种类型:将文法分为四种类型:0型文法(短语文法)型文法(短语文法):对任一产生式:对任一产生式,都,都有有(V(VN NVVT T)+,且至少含有一个非终结符,且至少含有一个非终结符,(V(VN NVVT T)*1 1型文法(上下文有关文法)型文法(上下文有关文法):对任一产生式对任一产生式,都有,都有|,仅仅
25、仅仅 SS除外除外 现在学习的是第30页,共69页文法的类型文法的类型(续续)2 2型文法(上下文无关文法)型文法(上下文无关文法):对任一产对任一产生式生式,都有,都有VVN N ,(V(VN NVVT T)*3 3型文法(正规文法)型文法(正规文法):任一产生式任一产生式的形式都为的形式都为AaBAaB或或AaAa,其中,其中AVAVN N ,BVBVN N ,aVaVT T现在学习的是第31页,共69页文法的类型举例文法的类型举例例:例:1 1型(上下文有关)文法型(上下文有关)文法 文法文法GSGS:SCDSCDAbAaAbAa CaCA CaCABaBABaBA CbCB CbCBB
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 03 文法 语言
限制150内