信息检索与web搜索课件 09学习资料.pptx
信息检索与Web搜索;关于评价;IR的评价要素;如何评价效果?;评价任务的例子;评价指标;评价任务的例子;整个文档集合的划分;P/R评价指标;P/R与RR/RN/NR/NN之间的关系;基于集合的图表示;评价任务的例子;另一个计算例子;关于P/R的讨论;关于P/R的讨论;P/R评价指标的问题;关于召回率的计算;4个系统的Pooling;P和R的融合;20;21;P-R曲线;P-R曲线;P-R曲线举例;P-R曲线举例;P-R曲线的插值处理;插值生成的P-R曲线图;P-R曲线的优缺点;基于P-R曲线的单一指标;TREC概况;TREC的目标;TREC的运行方式;33;确定任务:NIST提供测试数据和测试问题
报名:参加者根据自己的兴趣选择任务
运行任务:参加者用自己的检索系统运行测试问题,给出结果
返回结果:参加者向NIST返回他们的运行结果
结果评估:NIST使用一套固定的方法和软件对参加者的运行结果给出评测结果
大会交流:每年的11月召开会议,由当年的参加者们交流彼此的经验
;测试数据和测试软件;TREC任务情况;历届TREC参加单位数示意图;参加过TREC的部分单位;相关性评估过程;40;41;42;43;44;关于检索评价的研究;46;47;48;49;50;课后作业