2023年信息检索学习笔记.pdf
《2023年信息检索学习笔记.pdf》由会员分享,可在线阅读,更多相关《2023年信息检索学习笔记.pdf(40页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、信息检索第一章信息检索的基础理论第一节基础概念一、信息概述(一)信息的定义:信息指的是事物的存在方式和运动状态,是对客观世界中各种事物变化和特性的反映,是客观事物之间互相作用和联系的表征,是客观事物通过感知或结识后的再现。世界三大基本要素:信息物质能量(二)信息的特性1.客观性信息来源于物质,又不是物质自身:它从物质的运动中产生出来,又可以脱离物质相对独立地存在。信息业来源于精神世界,但又不限于精神的领域。信息是具体的,并且可以被人所感知、提取、辨认,可以传递、存储、变换、显示、检索和运用。2.普遍性3.可存储性 4.可 传 递 性 5.扩 散 性 6.共享性7.时效性(三)信息的功能1.经济
2、功能运用信息可以使非资源转化为资源发明财富。使用信息取代劳动力、资金、材料等资源发明财富,实现经济效益倍增。直接让信息作为商品在市场流通中发明财富。通过信息进行科学决策,减少失误,发明财富。2.管理与协调功能5M 资源:人、财、物、设备、管理办法信息的管理与协调功能在组织活动中的作用:传递整个组织的运营目的,有效管理5 M 资源。调节和控制物质流和能源流的数量、方向和速度。传递外界对系统的作用,保持组织的内部环境稳定。3.选择和决策功能4.研究与开发功能二、知识1.知识的概念:知识是人类社会实践经验的总结,是人的主观世界对于客观世界的概括和如实反映,是人类对自然界、人类社会以及思维方式与运动规
3、律的结识。2 .知识的类型显性知识和隐性知识。实体知识和过程知识。核心知识和非核心知识。三、情报1.情报的概念:情报是具有特定传递对象的特定知识货有价值的信息。2.情报的特性动态性按特定的方式传递为特定目的服务的经常有一定的时效性和机密性3.情报的类型零次情报:私人笔记、手稿、设计草图、会议记录、口头言论等。一次情报:调查报告、研究报告、科学论文、专利说明书、会议文献、专著等。二次情报:书目、索引、文摘等三次情报:综述、专题评论、年度总结、研究进展报告、数据手册、专业年鉴等。四、信息、知识和情报之间的关系知识是人的大脑通过思维重新集成整合的、反映事物运动规律的系统华信息,是信息中最有价值的部分
4、;情报是具有特定传递对象的特定知识或有价值的信息,其中一部分在知识之内,另一部分则在知识之外的信息之内。因此,从逻辑上看,信息、知识、情报三者的概念之间是相容关系,具体来说,信息与知识、情报之间是属种关系,信息是属概念,知识、情报是信息之下具有交叉关系的种概念。五、信息资源(一)信息资源的概念1 .广义信息资源的定义:人类社会活动中积累起来的信息、信息生产者、信息技术等信息活动要素的集合。人类社会经济生活中通过加工解决使之有序化并大量积累后的有用信息的集合。为某种目的而生产有用信息的信息生产者的集合。加工、解决和传递有用信息的信息技术的集合。2.狭义信息资源的定义:人类社会经济活动中通过加工解
5、决,使之有序化,并大量积累后的有用信息的集合。(二)信息资源的特性1.信息资源的一般特性作为生产要素的人类需求性稀缺性因素:一、信息资源的开发需要相应的成本;二、在既定的技术和资源条件下,任何信息资源都有一固定不变的总效用,但它每次被投入经济活动中去时,资源使用者总可以得到总效用中的一部分并获得一定的利益,随着被使用次数的增多,这个总效用会减少,当减少到零时,该信息资源就不再具有经济意义。使用方向的可选择性。2.信息资源的特殊性共享性时效性(三)信息资源的类型1、体裁信息资源:以人体为载体并能为别人辨认的信息资源2、文献信息资源:以文献为载体的信息资源3、实物信息资源:以实物为载体的信息资源4
6、、网络信息资源:从计算机技术、通信技术、多媒体技术互相融合而形成的网络上可查到的资源,涉及非正式出版信息半正式出版信息正式出版信息第二节信息检索概述一、信息检索的概念:广义信息检索涉及信息存储和信息检索两个过程,指将信息按一定方式收集、组织和存储起来,并根据信息用户的需求找出所需信息这一过程和技术,又 称“信息存储和检索“(I n fo rma t i o n St o r ag e a n d Re t rie v a l)狭义信息检索,不涉及信息存储过程,仅指依据一定的方法,从已经组织好的信息集合中,查找并获取特定需求的信息这一过程。二、信息检索的类型1、根据检索内容或检索对象不同,可将信
7、息检索分为文献检索、数据检索和事实检索。1 )文献检索(Docum e n t Ret r ieval):指以文献为检索对象的信息检索,传统上是信息检索的核心部分2)数据检索(Dat a Retriev a 1 ):指以各种数据为检索对象的检索3)事实检索(F a ct R etrieval):指以各种史实资料、研究结果和现状为检索对象的检索过程2、按组织方式,可有全文检索、超文本检索和超媒体检索1)全文检索(F u ll-te x t R etrieval):将存储于数据库中的整本书、整篇文章中的任意内容信息查找出来的检索2)超文本检索(Hyp e r-text R e t rieval):
8、是对每个结点中所存在的信息以及信息链构成的网络中信息的检索。3)超媒体检索(Hype r medi a Ret r ieva 1 ):是对存储的文本、图像、声音等多种媒体信息的检索。3、按检索设备分,可分为手工检索和机器检索1)手工检索(Hand Retr i eva 1 ):是人直接用手、眼、脑组织、查找印刷型文献的检索2)机器检索(M a chine R e trie v al):又称计算机检索,是通过机器对已经数字化的信息按照设计好的程序进行查找和输出的过程,可分为脱机检索和联机检索。三、信息检索的发展趋势1、统一的检索界面2、积极的信息推送服务3、多种检索模型将融为一体4、可视化技术实
9、用化5、检索职能化第三节信息检索原理一、信息检索基本原理:信息检索涉及信息存储与信息检索两个过程。信息存储过程中,信息标引人员分析原始信息,找出能代表文献信息的特性,对文献信息进行标引,对照检索语言将其外部特性和内容特性转化为一定的标引标记,再将这些标记按一定的顺序编排后纳入检索系统,提供多种检索途径:而在信息检索过程中,检索人员全面详尽地分析课题,找到其特性形成检索提问,再将这些提问与检索语言相对照形成检索提问标记。信息检索的基本原理:检索提问标记与存储在检索系统中的标引标记进行比较,两者完全匹配或信息标引中的标记包含了检索提问中的标记,即为检索命中,具有该标记的信息就从检索系统中作为检索结
10、构输出。二、计算机信息检索的原理1、计算机信息检索的实现过程:用户对检索课题加以分析,明确检索范围,弄清楚主题概念,然后用系统检索语言来表达主题概念,形成检索标记及检索策略,输入到计算机进行检索。分为两个过程:一是信息存储,即按一定的规则将信息进行加工、赋予特性标记,并将这些标记按一定的顺序编排后纳入检索系统;一是信息检索,就是用户根据自己的检索规定向系统发出具有提问特性的检索式,系统自动地将自己存储的相关信息集合的标引标记及其逻辑组配关系与之类比、匹配,给出与特性标记相符的记录。2、计算机信息检索的实现条件:计算机、通信网络、检索终端设备和数据库3、计算机信息检索的发展1)脱机批解决检索阶段
11、2)联机检索阶段3)光盘检索阶段4)网络化检索阶段4、计算机信息检索的服务方式1)回溯检索2)定题检索3)随机问答4)联机订购第四节检索语言一、检索语言的概念:一般指文献标引和检索所使用的一种专门语言,是用以表达概括文献信息特性和检索课题内容特性的概念及其互相关系的一种概念标记系统,即在存储时用以描述文献信息的内容和外部特性,而在检索时则用以表达提问的语言。二、检索语言的类型一是按检索语言的规范化限度来划分,可分为规范化的人工语言和非规范化的自然语言;二是按检索语言的词汇组配方式来划分,可分为先组式语言和后组式语言;三是按描述文献信息内容特性来划分,可分为分类语言和主题语言;四是按词汇的类型来
12、划分,可分为关键词语言、单元词语言、标题词语言和叙词语言等。1、人工语言和自然语言1)人工语言:又称程控语言,它是根据文献信息检索的需要,由人工采用规范词而创建的一种受情报检索控制的语言。2)自然语言咱然语言检索用词是取其自然形态,从信息内容自身抽取,不受人工控制,重要依赖于计算机自动抽词技术来完毕,但是需要辅以人工自由标引,即不依据词表的标引方法,使用非规范词或称自由词。3)人工语言与自然语言的比较:人工语言的查全率、查准率比较高,人工语言的检索效率要高于自然语言,但是人工语言是基于印刷型文献资源产生的,对标引来说,工作量大,成本高,对文献信息检索来说,用户不容易掌握。而自然语言则不然,对标
13、引来说,重要由计算机检索系统自动完毕,具有灵活性、新奇性和专指性,并且检索点多,管理和维护成本低;对文献信息检索来说,用户很容易掌握。但是由于目前计算机抽词技术还无法达成从自然语言中抽取最准确并可以表达信息资源内容的词,无法自动规范自然语言,无法指示概念之间的关系,缺少对词汇的控制能力,因此检索效率比较低。2、先组式语言和后组式语言1)先组式语言:是指在检索实行前己事先组配好的一种检索语言,有较好的直接性和专指性,但灵活度查,如标题词语言。2)后组式语言:是指在检索实行前未事先组配好的、以单元词等形式出现的一种检索语言。3、分类语言和主题语言1)分类语言:分类语言是按学科范畴和知识之间的互相关
14、系列出类目,并用数字、英文字母对类目进行标记的一种检索语言。2)主题语言:又称主题词语言或主题词检索语言,由主题词汇构成,也就是将自然语言中的名词术语通过规范化后直接作为文献信息标记,因此又称主题词表、主题词语言或主题法,如关键词语言、单元词语言、标题词语言、叙词语言等。关键词语言属于自然语言单元词语言,属于人工语言,又称元词,元词语言是后组式语言标题词语言是一种先组式规范语言,属于人工语言。如 工程索引,用标题词检索叙词语言是一种后组式规范语言,也属于人工语言。第五节检索系统与数据库一、检索系统1、检索系统的概念:检索系统是为满足信息需求而建立的,具有收集、组织、存储和查询等功能的文献信息资
15、源和相关设备设施的总称,由信息资源库、技术设备、规则体系和检索人员组成,其中信息系统的主题部分是信息资源库。2、检索系统的类型1)按加工手段和技术设备的不同,可将检索系统分为手工检索系统、机械检索系统、计算机检索系统2)按载体形式不同,可分为卡片式、书本式、缩微式、磁性材料式等检索系统3)按著录格式不同,可将检索系统分为目录、题录、文摘、索引、全文检索系统。3、计算机信息检索系统的组成:信息选择子系统、标引子系统、建库子系统、词表管理子系统、用户接口子系统(信息检索系统的用户接口常采用命令检索、菜单检索、图像检索及超文本检索等方式)、提问解决子系统(本模块重要由检索程序构成,执行过程中可完毕以
16、下操作:接受提问、提问校验、提问加工、检索)组成。信息选择子系统:任务是根据系统的目的和服务对象的需要,拟定数据收集范围,拟定数据收集范围,并广泛地、定期地采集各种信息源,为系统提供充足而合用的数据。二、数据库1、数据库概述数据库:至少由一种文档组成,并能满足某一特定目的或某一特定数据解决系统需要的一种数据集合。2、数据库的结构1)数据库一般结构:字段、记录、文档。顺排文档和倒排文档基本索引、辅助索引2)从数据库用户的角度看,数据库的结构可分为集中式、分布式、并行式、异构式数据库结构,客户机/服务器结构和浏览器/服务器结构。3、数据库的特点:1 )数据库的数据具有结构化的特点;2)数据库中所存
17、储的数据是面向现实世界的;3)数据库中的数据的共享性好,冗余度低;4)数据库中数据的独立性强;5)数据库由数据库管理系统统一管理和控制4、数据库的类型按提供信息的等级来分:参考数据库和源数据库按存储数据的类型来分:文献数据库、数值数据库、事实数据库、图像数据库按存储介质不同来分:磁带数据库、磁盘数据库、光盘数据库按数据模型的不同来分:层次型数据库、网状型数据库、关系型数据库按涵盖学科的不同来分:综合型数据库、专业型数据库5、文献数据库的功用1)文献数据库对文献信息的规范化管理是以往任何管理方式无法替代的2)文献数据库为用户提供了多途径的检索方式3)文献数据库可认为用户提供多种形式的服务内容。4
18、)文献数据库为用户提供了多渠道的检索服务三、数据仓库技术1、数据仓库概述数据仓库:是指一个用于更好地支持公司或组织的决策分析解决的、面向主题的、集成的、不可更新的、随时间不断变化的数据集合。2、用于事务解决的数据库系统与用于决策分析的数据仓库系统的重要区别1)事务解决与分析解决性质不同;2)数据集成问题,决策支持系统需要集成数据,而事务解决系统则不需要;3)历史数据的使用,事务解决通常只要当前数据,而决策支持系统需要详尽的历史数据。3、数据仓库的基本特性:数据仓库的数据是面向主题的、集成的、随时间不断变化的,仅供查询。4、数据仓库的技术内容:数据仓库技术、联机分析解决技术、数据挖掘技术。*第二
19、章信息检索的基本技术第一节信息检索技术概述一、信息检索的一般方法1、常用法:又称直接法、常规法,指直接运用文摘、索引等检索工具查找文献的方法,涉及顺查法、倒查法、抽查法2、引文追溯法:是运用参考文献间的引用与被引用的关系进行检索的方法,即从已有的文献所附的参考文献开始追踪查找原文,再以原文所附的参考文献作为起点追查更多的原文,逐级追查,不断扩大检索线索3、循环法、又称分段法、综合法二、检索途径检索途径:以文献的外部特性进行检索的途径和以文献信息的内容特性进行检索的途径,前者涉及题名途径、著者/机构途径、号码途径等,后者涉及分类途径、主题途径等。1、分类途径;2、主题途径;3、题名途径;4 引文
20、途径;5、序号途径和符号代码途径;6、全文关键词途径7、著者/机构途径;8、其他途径三、检索策略广义的检索策略是为实现检索目的而制订的所有检索计划,即在对课题进行全面、实质分析的基础上,选择检索系统、检索途径和检索词,明确各词之间的逻辑关系,并根据各检索词之间的关系和系统,允许使用的各种算符、限定字段等组建检索式,拟定检索环节狭义的检索策略是检索提问式1、检索词:简明、准确地概况检索规定的词语2、检索式:又称检索提问式,是检索策略的某种具体体现3、检索策略的制定和调整1)检索策略的制定:制定检索策略不仅要全面、准确地对课题进行概念分析,拟定概念单元和概念之间的关系,并且要熟悉有关的检索系统,2
21、)检索策略的调整扩大检索范围:扩大约念;增长同义词或同族相关词并运用逻辑或进行组配、减少检索词或少用逻辑与算符、减少位置算符的使用或有关的字段限制;扩大3、检索的年代、文献类型、文种范围等方法达成目的缩小检索范围:缩小检索概念;使用逻辑与等算符;缩小检索的年代、文献信息源范围使、检索程序1、全面分析课题,拟定信息需求和检索目的2、选择检索系统(检索工具),我们应当在课题分析的基础上,根据课题的特点,ix n x i需求,检索目的,选择专业对口、覆盖范围广、更新及时、内容准确权威、检索功能完备的检索系统3、拟定检索途径和检索方法4、拟定检索词及检索词之间的关系,编制检索式5、检索,并根据需要随时
22、调整检索策略,得到所需检索结果6、索取原始文献信息五、原始文献获取途径(-)直接通过网络获取原始文献1)通过搜索引擎查找:直接通过搜索引擎查找运用搜索引擎与数据库、图书情报机构的合作,实现对这些合作机构文献信息产品的检索与运用;2)网络出版物及网络出版物目录3)出版商4)学术网站5)免费全文数据库6)通过文摘、题录数据库提供的订购途径购买(二)简介获取原始文献:先查到馆藏地点,再通过与该图书馆联系获取原文1、查找馆藏地点1)特定图书情报机构的馆藏目录;2)联合目录 全国期刊联合目录 全国高校图书馆进口报刊预订联合目录 C A SH L 图书期刊联合目录 C A L IS图书期刊联合目录O C
23、L C 图书、期刊联合目录中国科学院中西文图书联合目录数据库;3)数据库中的馆藏字段连接馆藏字段电子期刊全文连接通过馆际互借获取原文通过文献传递获取原文4)出版商提供的出版信息2、从实体图书获取原文(三)通过个人与有关机构的交流获得第二节计算机信息检索技术一、系统支持的语法(一)计算机信息检索的常用算符1、布尔逻辑算符:逻辑或、逻辑与、逻辑非1)逻辑加(O R 或“+”也 称“或”运算,这是反映概念之间并列关系的-种组配方式,可扩大检索范围、增长输出量,以免漏检2)逻 辑 乘(A N D 或“*”),也 称“与”运算。这反映概念之间交叉和限定关系的-种组配方式,用以缩小检索范围,减少输出结果,
24、提高查准率3)逻辑非(N O T 或A NOT B一用于从包含A 的文献信息范围中减去具有B 的内容。这些逻辑算符在运算中的优先顺序一般为:NOTAND OR2、优先解决算符3、位置算符:位置算符用于表达词与词之间的互相关系和前后的顺序,通过对检索词之间位置关系的限定,进一步增强选词指令的灵活性,提高检索的查全率与查准率1)W算 符(W i th):通常写作A(nW)B,表达词A 与 词 B 之间之多可以插入n 个其他的词(涉及系统禁用词),同时A、B 保持前后顺序不变2)N 算符(Near):通常写作A(nN)B,表达A 与 B之间之多可以插入n 个其他词,同时A、B不必保持前后顺序3)S
25、算 符(S ubf i eld):通常写作A(S)B,表 达 A 与 B 必须同时在一个句子中或同一子字段内出现,但顺序可随意变化,且各词间可加任意词4)F 算符(Field):通常写作A(F)B,表 达 A 与 B 必须同时出现在同一记录中,不限定词序和字段,其作用同布尔逻辑算符“AND”(-)截词(截断)检索截词检索重要是运用检索词的词干或不完整的词形进行非精确匹配检索,凡具有词的这一部分的所有字符或字符串的文献信息,均被认为是命中结果。1、从截断字符的数量看,截词可分为无限截词和有限截词1 )无限截词,一个无限截词符可代表多个字符,表达在检索词的词干后可加任意个字符或不加字符。符号:“*
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 2023 信息 检索 学习 笔记
限制150内