语言文字信息处理教程第一章、概论.ppt

《语言文字信息处理教程第一章、概论.ppt》由会员分享，可在线阅读，更多相关《语言文字信息处理教程第一章、概论.ppt（37页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、语言文字信息处理教程语言文字信息处理教程第一章、概论盛玉麒山东大学中文信息研究所第一节、信息与信息处理(一)什么是信息(二)信息的基本属性(三)什么是信息处理(四)语言文字的信息属性(五)语言文字信息处理的特点(一)什么是信息信息是20世纪人类最伟大的发现之一。对信息属性与功能的开发和利用成为“信息化社会”的基本生产方式和重要的支柱产业。信息的属性可以从不同的角度来认知和归纳。信息是关于事物运动的状态和方式的广义知识。信息是与物质、能量并列的世界组成的三大要素。(一一)信息的基本属性信息的基本属性1、客观性2、符号性3、可转换性4、可复制性5、可传递性6、可共享性1 1、客观性、客观性信息是客

2、观事物存在的方式和状态的总和以及人们对客观存在的认识。无论是从信息来源看还是从人们对信息的认知路线与描述方式看，都需要以客观存在为基础，以事物的本质属性与客观实践为判断标准。真实反映与正确描述客观事物的本质属性才是有价值的信息。2 2、符号性、符号性信息既不是物质、也不是能量，而是关于物质和能量的存在状态与方式，即关于物质和能量的属性的符号。3 3、可转换性、可转换性同一信息可采用不同的载体和表现形式。不同载体形式之间可以进行转换。同一个语义信息既可以用实物表达、也可用手势、形体或语言的形式；既可以用文字、图像，也可以用声音、动画，各种形式都可以转换为数码符号。多种表现形式和多种载体类型都属于

3、广义的符号范畴。4 4、可复制性、可复制性信息可以无限制地复制，复制后的结果和原型之间无论从形式、结构还是功能等方面看都毫无二致。5 5、可传递性、可传递性信息可以在时间和空间的范围内进行传递。在空间范围中的传递是“通信”、在时间上的传递就是“记忆”。6 6、共享性、共享性因为具有了上述基本属性，人们可以通过对信息的采集和控制，实现对客观物质和能量的了解与控制；通过对信息的加工与处理实现对物质的改造与优化。因此，就使得信息具有了“间接资源”或“无形资源”的共享性特点。(三)什么是信息处理1、信息的采集2、信息的存储3、信息的加工4、信息的传递5、信息科学的产生1、信息的采集文字图形音频视频数据

4、2、信息的存储1、存储形式：原型加工2、存储介质磁介质光介质3、信息的加工修改分类排序比较查询检索统计分析特征抽取4、信息的传递人机人系统机人机系统机机机系统方式：串行并行5、信息科学的诞生1948年，美国数学家申农发表通信的数学理论标志着信息论的创立。信息论发展的三个时期：1、20世纪50年代，新创立的信息论向各个学科的冲击。2、20世纪60年代，划分出狭义信息论、一般信息论、广义信息论。3、20世纪70年代形成信息科学。4、信息科学是与电子学、计算机、自动化技术、生物学、心理学、管理学相互联系而形成的综合性科学 语言文字自的信息属性逻辑思维的符号认知交际的媒介智力开发的工具科技发展的基础文

5、化传承的载体信息处理的重点民族心理的寄托国家主权的象征 属性1：逻辑思维的符号 马克思说过，语言是思想的直接现实。马克思说过，语言是思想的直接现实。人人类类的的逻逻辑辑思思维维离离不不开开语语言言，人人类类社社会会离不开语言。离不开语言。如果没有语言，就不成其为人类社会。如果没有语言，就不成其为人类社会。属性2：认知交流的媒介 语语言言哲哲学学家家认认为为，语语言言是是人人类类认认识识世世界界的中介。的中介。人人们们只只有有凭凭借借语语言言才才能能了了解解世世界界，也也只只有有通通过过语语言言才才能能描描述述对对世世界界的的认认识识，从从而使别人了解自己。而使别人了解自己。如如果果没没有有语语

6、言言，思思想想、认认识识和和经经验验等等都都失去了媒介。失去了媒介。属性3：智力开发的工具语言是和智能活动联系在一起的。语言是和智能活动联系在一起的。语言能力的获得是人类进化的关键一步。语言能力的获得是人类进化的关键一步。智智力力和和素素质质在在很很大大程程度度上上表表现现为为语语言言思思维维和和表表达上。达上。毛毛泽泽东东说说过过，感感觉觉到到的的东东西西不不能能很很好好的的认认识识，只有理解了的东西才能更深刻地认识。只有理解了的东西才能更深刻地认识。只只有有首首先先获获得得语语言言能能力力，才才有有可可能能进进一一步步开开发发大脑的智力。大脑的智力。语言能力差而具有较高智商的人是很少见的。

7、语言能力差而具有较高智商的人是很少见的。属性4：科教发展的基础科科技技和和教教育育是是人人类类社社会会进进步步和和发发展展的的动动力。力。其其基基础础即即要要依依靠靠语语言言文文字字的的记记录录、表表达达和传递。和传递。无无论论多多么么先先进进的的理理论论、或或者者科科学学技技术术，都都必必须须获获得得正正确确的的记记录录和和表表达达，才才能能被被更多的人学会和掌握，与更多的人共享。更多的人学会和掌握，与更多的人共享。属性5：文化传承的载体语语言言文文字字又又是是文文化化的的载载体体，由由于于有有了了语语言言文文字字的的记记录录，历历史史才才能能够够得得以以传传承承和和延续。延续。也也由由于于

8、有有了了语语言言文文字字的的记记录录，民民族族特特色色的的文文化化精精华华才才能能在在共共时时的的空空间间中中广广泛泛地地传播。传播。属性6：信息处理的重点 在在多多媒媒体体信信息息网网络络时时代代，在在图图、文文、声声、像像等等所所有有的的信信息息媒媒体体中中，语语言言文文字字仍仍是是信息处理的重点。信息处理的重点。我我们们社社会会和和生生活活中中绝绝大大多多数数信信息息都都是是以以语言文字的形式出现的。语言文字的形式出现的。可可以以说说，进进入入信信息息时时代代的的根根本本标标志志就就是是语言文字信息的数字化。语言文字信息的数字化。属性7：民族心理的寄托语言是民族的重要构成部分。语言是民族

9、的重要构成部分。作作为为民民族族特特征征和和标标志志的的语语言言文文字字在在长长期期的的使使用用过过程程中中，被被赋赋予予了了丰丰富富而而深深厚厚的的内涵，成为民族心理的寄托。内涵，成为民族心理的寄托。所所谓谓“他他乡乡遇遇故故知知”、“乡乡音音无无限限情情”、“母母语语情情结结”等等等等，都都是是古古今今共共同同的的感感情表达。情表达。属性8：国家主权的标志 都都德德的的最最后后一一课课为为什什么么打打动动了了亿亿万万人人的的心心，就就是是因因为为他他写写出出了了一一个个国国家家和和民族的语言民族的语言“情结情结”。任任何何一一个个主主权权国国家家都都有有自自己己法法定定的的语语言言文字。文

10、字。所所有有的的外外交交官官不不管管外外语语多多好好，在在外外交交场场合合也也要要使使用用自自己己国国家家的的语语言言讲讲话话，因因为为这涉及到一个主权国家的独立和尊严。这涉及到一个主权国家的独立和尊严。(五)语言文字信息处理的特点西文1、字母文字2、小字符集3、键盘基础4、分词5、硬件原创6、软件原创中文1、图形文字2、大字符集3、没有键盘基础4、不分词5、硬件引进6、软件汉化(五)语言文字信息处理的理论思考1、重要的信息载体2、不是唯一的载体3、语义信息的多维性4、语言编码的多重性1 1、信息载体、信息载体语言是载负信息的符号系统。著名语言学家Saussure指出，语言是一种社会惯例，是表

11、达概念的符号系统。从音义结合的关系上看，语言是音义结合的符号系统。“语言是人类社会最重要的交际符号系统”。人与人之间交际的本质就是进行信息的交流和交换，2 2、语言不是唯一的信息载体、语言不是唯一的信息载体语言信息的载体并不仅仅限于语音。除了语音之外，表情、手势、姿势、环境、相互关系、话题等等都能够参与交际、起到信息载体的功能。这些非声音手段的参与就使得语言的交流和交际表现出多信道的特点。3 3、语义信息的多维性、语义信息的多维性(1)语语言言能能力力是人的一般认知能力的一部分，因此语言不是一个自足的系统，其描写和理解都必须参照认知过程；(2)语语言言结结构构与人类的概念知识、实践经验以及话语

12、的功能有关，并以它们为理据；4 4、语言编码的多重性、语言编码的多重性实物代码实物代码语音代码语音代码文字代码文字代码副语言代码副语言代码实物代码实物代码从信息传递和处理的角度看，所有的实物都可以传递信息。即使是现代人在现实生活中也经常使用这些非语言代码方式进行相互间的信息沟通。即使在正常人群的交往和交际过程中实物充当了十分重要的脚色；教学使用的图画、教具、实物等帮助学生加强对知识的理解。语音代码语音代码语音是有声语言的重要代码系统。采用语音作代码有很多好处：成本低、干扰少、可控性强、区别性特征灵活多样，等等。语音代码的基本单位是音节。作为“语言”的基本单位都是“音义结合体”。语言系统中意义的

13、最小单位就是语素。任何语言中的语素几乎没有小于一个音节的。文字代码文字代码文字是最重要的辅助语言交际的书写符号系统。文字的最大功能是将听觉符号的代码系统转换为视觉符号的代码系统。突破了有声语言在“时间”与“空间”上的局限性，可以使语言信息传递得更加久远。一切成熟的文字代码几乎都是与语音代码具有同等的效能。副语言代码副语言代码“副语言代码”形式诸如手势、姿势、动作、表情等等许多非语音的成分。这些非语音成分也同样具有载负信息的功能，同样能够表情达意，因此，被称为“形体语言”。有研究表明，在人们的生活中，副语言信息代码所传递的信息占一个人所获得的全部外界信息的80%以上。语义是一种特别的符号关系语义是一种特别的符号关系萨丕尔认为，语义是“一种特别的符号关系”。对语义信息的习得、传递、表达和交流传递、表达和交流，就是建立、描述、理解和确定各种“符号关系”。萨丕尔同时指出，语言的“内在意义，它的心灵价值或强度，随着注意或心灵选择的方向而自由变化”。聋童语训可以采用多种手段和方式通过注意和心灵选择帮助他们建立内在语义的认知模式。练习与思考1、什么是信息？2、信息有哪些基本属性？3、语言文字的信息属性有哪些？4、简述语言文字信息处理的特点。