首页> 外文期刊>Technique et science informatiques >Analyse des critères d'évaluation des systèmes de recherche d'information
【24h】

Analyse des critères d'évaluation des systèmes de recherche d'information

机译:分析评估信息研究系统的标准

获取原文
获取原文并翻译 | 示例
           

摘要

Evaluating information retrieval implies a document collection on which search is carried out, a set of test queries and the lists of the relevant documents for each query. This evaluation framework also includes evaluation measures making it possible to control the impact of search parameters on the performance. Trec-eval calculates a large number of measures, some being used more widely, like the mean average precision or recall-precision curves. The aim of this paper is to choose the minimal set of measures necessary to compare different information retrieval systems. In this paper, we present the study we carried out on relationships between 27 measures among the most used in the literature. We show that a set of 7 measures is enough to represent 27 studied measures: ircl_prn.80, MAP, ircl_pr.20, recip_rank, P15, exact_precision, and exact_recall.%Le modèle d'évaluation utilisé en recherche d'information implique une collection de documents sur laquelle les recherches sont effectuées, un ensemble de requêtes de test et la liste des documents de la collection pertinents pour chacune des requêtes. Ce modèle inclut également des mesures d'évaluation permettant de contr?ler l'impact, sur la performance de la recherche, de la modification de certains paramètres d'un système. Trec-eval permet de calculer un grand nombre de mesures, certaines étant plus couramment utilisées comme la précision moyenne ou les courbes de rappel-précision. Le choix de l'ensemble minimal des mesures de performance nécessaires pour comparer deux systèmes a motivé l'étude qui est présentée dans cet article. Nous étudions la corrélation de 27 mesures parmi les plus utilisées dans la littérature. Nous montrons que 7 mesures sont suffisantes pour représenter les 27 mesures étudiées : ircl_prn.80, MAP, ircl_pr.20, recip_rank, P15, précision exacte et rappel exact.
机译:评估信息检索意味着在其上执行搜索的文档集合,一组测试查询以及每个查询的相关文档的列表。该评估框架还包括评估措施,可以控制搜索参数对效果的影响。 Trec-eval计算了大量度量,其中一些度量被更广泛地使用,例如平均平均精度或查全率-精确度曲线。本文的目的是选择比较不同信息检索系统所需的最小量度措施。在本文中,我们介绍了我们对文献中最常用的27种度量之间的关系进行的研究。我们显示,一组7个量度足以代表27个研究的量度:ircl_prn.80,MAP,ircl_pr.20,recip_rank,P15,exact_precision和确切_recall。%Lemodèled'évaluationutiliséen recherche d'information隐含信息检验和证明单据的集合,有关文献的收藏都被要求。确保对影响力进行评估,对性能的评价,对性能的确定,对系统的确定性参数的修改。在一定程度上确保了人们对Trec-eval的了解,并肯定了Moyenne ou les ur coupe de rappel-cision的荣誉功用。 Le Choix de l'ensemble最低要求的性能倒入比较器deuxsystèmes的动机是lééudequi estprésentéedans cet文章。第27号法律法规确保了律师资格以及文学上的效用。 Nous montrons que 7测量suffisantes pourreprésenterles 27测量setudiées:ircl_prn.80,MAP,ircl_pr.20,recip_rank,P15,精确度和精确性。

著录项

  • 来源
    《Technique et science informatiques》 |2010年第3期|p.289-308|共20页
  • 作者单位

    Institut de Mathématiques de Toulouse, UMR 5219 Université de Toulouse et CNRS Université Paul Sabatier, 118, route de Narbonne, F-31062 Toulouse cedex 9;

    Institut de Mathématiques de Toulouse, UMR 5219 Université de Toulouse et CNRS Université Paul Sabatier, 118, route de Narbonne, F-31062 Toulouse cedex 9;

    Institut de Recherche en Informatique de Toulouse, UMR 5505 IUFM, Université de Toulouse et CNRS Université Paul Sabatier, 118, route de Narbonne, F-31062 Toulouse cedex 9;

    Institut de Recherche en Informatique de Toulouse, UMR 5505 IUFM, Université de Toulouse et CNRS Université Paul Sabatier, 118, route de Narbonne, F-31062 Toulouse cedex 9;

  • 收录信息
  • 原文格式 PDF
  • 正文语种 fre
  • 中图分类
  • 关键词

    recherche d'information; mesures de performance; évaluation; analyse statistique de données;

    机译:寻求信息;绩效指标;评估;统计数据分析;

相似文献

  • 外文文献
  • 中文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号