信息存储与检索 教学课件 ppt 作者 王知津 第9章
65页1、第九章 信息检索评价与实验,,信息存储与检索,本章目录,9.1 引言 9.2 信息检索相关性理论 9.3 信息检索评价指标体系 9.4 信息检索评价的过程与方法 9.5 经典的信息检索评价实验 9.6 信息检索评价实验平台:TREC,,信息存储与检索,第一节 引言,信息检索系统评价的内容包括:资源的收录状况、数据的质量、检索的功能与效率、系统的功能以及检索结果的反馈形式等。,数据的评价主要从两个方面考察: 一是数据的录入质量,如数据的错误率,数据的结构是否合理,数据的完整性如何,数据的著录是否完备等; 二是数据的加工质量,如数据的加工深度,数据的标引质量,数据的分类是否合理等。,,信息存储与检索,第一节 引言,检索的功能与效率的评价主要考察检索入口能否满足用户的需求,检索的组配是否丰富,查准率和查全率是否得当,检索的响应速度如何等。 检索功能和效率与检索算法有密切的关系,由于检索算法难以分辨出优劣,因此,可以通过检索界面、查全率和查准率以及检索响应时间等来判断检索的效率。,,信息存储与检索,第一节 引言,近年来,信息检索评价研究已从系统的输入方面的特性逐渐向检索者输入方面的特性转移,开
2、始注重研究检索专家的特性(如教育背景、经验、个性等)与检索成功率之间的关系。有些评价者还考察了采用不同检索键所引起的变化,例如,分别用题名关键词、文摘关键词、叙词、原文中的词,或者分别用主题词与引文对相同的课题进行检索时,检索结果之间的差异。,,信息存储与检索,第一节 引言,整体而言,信息检索评价活动范围扩大了,评价水平在不断提高,积累了大量有价值的试验或调查数据,初步揭示了检索系统及其各组成部分的运行机制及对系统性能的影响。不过需要指出的是,就目前状况而言,我们对用户需求相关性判断和系统行为的本质方面的探索还显得不足,有些评价方法还需要进一步完善,评价结果的解析和验证也有待进一步深入和加强。,,信息存储与检索,第二节 信息检索相关性理论,9.2.3 面向系统的相关性,3,3,9.2.4 面向用户的相关性,4,,信息存储与检索,9.2.1 相关性概念及其特征,(一)相关性的概念 相关性问题的出现:1958年,著名学者B.C.Vickery在 ICSI(the International Conference for Scientific Information)上的两篇会议论文引发对“
3、相关性”概念的最初讨论,“相关性”问题由此得到明确提出。 所谓“相关性判断”,是指信息检索中判断者在某一时刻对某种相关性的一种赋值操作。这个定义中包含了相关性判断的四个基本组成要素,分别是:相关性类型、判断者类型、判断时间和判断结果表达方式。,,信息存储与检索,9.2.1 相关性概念及其特征,相关性类型,指基于何种相关性进行判断; 判断者类型,指实施判断的主体,通常分为用户(user)与非用户(non-user)两大类,其中,用户指检索系统的真实用户,非用户则包括检索系统设计者、检索中介等在内的各类人员; 判断时间,很明显在不同的时间点,相关性判断的结果可能是不同的,所以判断时间也是相关性判断的基本组成要素; 判断结果的表达方式,指对相关性的赋值方法。,,信息存储与检索,9.2.1 相关性概念及其特征,(一)相关性的特征 1 关系 2 直觉 3 多维 4 动态,,信息存储与检索,9.2.2 影响相关性判断的变量,(一)文献与文献表示 文献与文献表示是检索的对象,对人的相关性判断有直接影响。人们比较了题名、题录、文摘和全文对相关性判断的不同影响,分析了文献的风格和内容专指性与相关性判断的
4、联系,发现:文献的主题内容是影响判断的最重要因素。文献内容愈具体,愈有利于相关性判断。文献的风格也可能影响判断。对同一文献,分别根据其题名、题录、文摘、全文来判断与特定提问的相关性,判断结果有差异。,,信息存储与检索,9.2.2 影响相关性判断的变量,(二)提问 提问促使文献作为答案输出、提问的专指性,判断者在不同研究阶段的知识状态以及提问的措辞等方面对判断均有影响。判断者对提问本身了解越多,对提问与答案的推断越深入,判断的一致性就越高。提问文本与相关文献文本之间似乎存在着较高的相似性和关联性,而在提问与非相关文献文本之间却未发现这种相似性。此外,判断者对提问本身知道得愈少,判断文献为相关的倾向性就愈大。,,信息存储与检索,9.2.2 影响相关性判断的变量,(三)判断环境与条件 这里主要指判断时间、人们对相关性的解释及其它环境因素。一些实验发现:实验条件的变化可能导致判断的变化;判断环境中的压力(如时间紧迫感)越大,会导致相关率越高;对相关性的不同解释并不一定导致不同的相关率。,,信息存储与检索,9.2.2 影响相关性判断的变量,(四)判断表达模式 这个变量是指供判断者用来表达判断的方
《信息存储与检索 教学课件 ppt 作者 王知津 第9章》由会员E****分享,可在线阅读,更多相关《信息存储与检索 教学课件 ppt 作者 王知津 第9章》请在金锄头文库上搜索。
逍遥游复习 知识点整理
近现代法德关系史 高三展示课3稿
当代大学生人生信仰及追求的调查研究
长相思 纳兰性德-ppt课件
课件:危机意识 一
英语ppt演讲关于阿甘正传
发达国家基础教育改革的动向与趋势 修改版
中国民间美术 课件.ppt
生物质发电技术与系统 课程ppt 第1章 生物质发电技术现状及发展趋势 2学时 -----2016
现代信号处理思考题 含答案
执业药师继续教育 抑郁症的药物治疗 100分
小学生的成长档案模板不用修改 万能型
增订六版 现代汉语 上册 第二章文字 思考与练习答案
国家财政ppt课件
加拿大英语介绍
六年级统计图的选择课件
中学生成长档案ppt
中国现代文学史期末复习整理
lohi和hihilo训练对女子赛艇运动员运动能力影响的比较研究
风雨贾平凹阅读答案
2024-03-21 39页
2024-03-21 41页
2024-03-21 40页
2024-03-21 34页
2024-03-21 33页
2024-03-21 35页
2024-03-21 21页
2024-03-21 45页
2024-03-21 33页
2024-02-20 85页