信息检索系统评价 信息检索研究生授课课件.pptVIP

Company Logo * 信息检索系统评价 吴 丹 * 信息检索的评价指标 内容提纲 1 网络信息检索工具的评价体系 2 信息检索工具发展趋势 3 * 信息检索的评价指标 内容提纲 1 网络信息检索工具的评价体系 2 信息检索工具发展趋势 3 * 如何评价一个信息检索系统？ 两个重要指标 查全率（Recall） 查准率（Precision） 其他指标 检索结果的输出 * 查全率 Recall，简称R 它是指检出的相关文献量与检索系统中相关文献总量的比率 查全率=检出的相关文献/系统中相关文献总量 是衡量信息检索系统检出相关文献能力的尺度 * 网络环境下的查全率 网络信息数量庞大，至今没有一个网络信息检索工具能覆盖所有的网络资源 网上信息稳定性差，瞬息万变 针对一个具体的检索提问，人们无法计算网络上究竟有多少信息与之相关 网络环境下，用定量的方法计算查全率不具有可操作性 * 查准率 Precision，简称P 它是指检出的相关文献量与检出文献总量的比率 查准率=检出的相关文献/检出文献总量 是衡量信息检索系统检出文献准确度的尺度 * 网络环境下的查准率 用户在使用有哪些信誉好的足球投注网站引擎时，都会有检索结果不准确的体验 网上信息数量巨大，内容复杂，信息质量无保障 大多数有哪些信誉好的足球投注网站引擎的索引工作由程序自动完成，有些网站为了提高点击率，将一些与网页主题并不相关的热门词以隐含的方式放在页面上，造成查准率低 有哪些信誉好的足球投注网站引擎对信息的标引深度不够，目前有哪些信誉好的足球投注网站引擎只能提供一些包括关键词的网页信息 针对一个具体的检索提问，人们往往只看有哪些信誉好的足球投注网站引擎返回的前10页的检索结果 网络环境下，从检索结果中抽出一部分结果进行计算，是一种可行的计算查准率的方法 * 相关 不相关 检索到的 a b a+b 未检索到的 c d c+d a+c b+d a+b+c+d 信息检索评价 * 信息检索的评价指标 内容提纲 1 网络信息检索工具的评价体系 2 信息检索工具发展趋势 3 * 网络信息检索工具的评价体系 覆盖率和信息质量 标引深度和标引准确率 数据更新频率 检索功能 响应时间 重复链接和死链接 用户满意度 * 2.1 覆盖率和信息质量 覆盖率指综合性网络信息检索工具的索引数据库占有网络资源总量的份额，或专业性网络信息检索工具的索引数据库占该专业领域网络资源总量的份额。 覆盖率大的索引数据库比覆盖率小的索引数据库好 网络信息资源中存在大量劣质信息和垃圾信息以及重复信息，信息资源质量是一个评价指标。 * 2.2 标引深度和标引准确率 标引深度指标引到网页的第几层，有的检索工具只标引主页，有的则标引到第二、第三层。 标引越深，查全率和查准率越高。 标引深度还包括对网页各种项目或内容进行部分标引还是全文标引，有的检索工具只标引文件名和目录名，有的只标引文件名、文件标题和文件正文前20行或20%的内容，有的则全文标引。 标引准确率直接影响检索质量。 * 2.3 数据更新频率 网络信息瞬息万变，数据更新频率是否快越来越受到用户重视。 网络信息检索工具的更新频率只有尽可能跟上网络信息资源的更新速度，才能保证信息的时效性。 * 2.4 检索功能 网络信息检索工具提供检索功能的多少及其实现的优劣，直接决定了检索效果的好坏。 网络信息检索工具除了要有诸如布尔检索、词位置检索、截词检索、限制范围检索等基本检索功能外，还应提供高级检索功能。 * 2.5 响应时间 响应时间是指从提交检索命令到查出资料结果所需的时间。 响应时间与多方面因素有关 计算机配置 上网方式 是否具有记忆有哪些信誉好的足球投注网站结果功能 * 2.6 重复链接和死链接 重复链接浪费用户宝贵的时间和精力 死链接会出现找不到原始文献的情况 特别是重复链接和死链接出现在前10个结果时，会严重影响检索效率，从而影响用户对检索工具的印象 * 2.7 用户满意度 检索工具应提供多种检索模式，以适应不同使用对象的检索需求 检索工具是否易用非常重要 用户界面的设计应力求简单、易用 * 信息检索的评价指标 内容提纲 1 网络信息检索工具的评价体系 2 信息检索工具发展趋势 3 * 3.1 继续加强浏览与检索功能的结合 浏览 用户想要得到关于某个主题的信息，或关于某个主题的新信息时，这种方式很适合 检索 当用户需要的信息很明确，采用这种检索工具能迅速检索到所需信息 * 3.2 有哪些信誉好的足球投注网站引擎集成化 集成化有哪些信誉好的足球投注网站引擎能同时调用多个独立有哪些信誉好的足球投注网站引擎，并能将检索到的结果进行去重等处理。 用户通过集成化的有哪些信誉好的足球投注网站引擎可以同时对几个有哪些信誉好的足球投注网站引擎进行检索，避免重复劳动，节省了检索时间和精力。