...
  • 主题
高级搜索  >
历史搜索 清空历史
首页> 外文期刊>Information retrieval >An analysis of evaluation campaigns in ad-hoc medical information retrieval: CLEF eHealth 2013 and 2014
【24h】

An analysis of evaluation campaigns in ad-hoc medical information retrieval: CLEF eHealth 2013 and 2014

机译：临时医学信息检索中的评估活动分析：CLEF eHealth 2013和2014

获取原文
获取原文并翻译 | 示例
           
页面导航
  • 摘要
  • 著录项
  • 相似文献
  • 相关主题

摘要

Since its inception in 2013, one of the key contributions of the CLEF eHealth evaluation campaign has been the organization of an ad-hoc information retrieval (IR) benchmarking task. This IR task evaluates systems intended to support laypeople searching for and understanding health information. Each year the task provides registered participants with standard IR test collections consisting of a document collection and topic set. Participants then return retrieval results obtained by their IR systems for each query, which are assessed using a pooling procedure. In this article we focus on CLEF eHealth 2013 and 2014s retrieval task, which saw topics created based on patients' information needs associated with their medical discharge summaries. We overview the task and datasets created, and the results obtained by participating teams over these two years. We then provide a detailed comparative analysis of the results, and conduct an evaluation of the datasets in the light of these results. This twofold study of the evaluation campaign teaches us about technical aspects of medical IR, such as the effectiveness of query expansion; the quality and characteristics of CLEF eHealth IR datasets, such as their reliability; and how to run an IR evaluation campaign in the medical domain.
机译：自2013年成立以来，CLEF电子卫生保健评估活动的主要贡献之一就是组织了临时信息检索（IR）基准测试任务。此IR任务评估旨在支持外行人员搜索和了解健康信息的系统。每年，该任务都会为注册的参与者提供标准的IR测试集，包括文档集和主题集。然后，参与者返回其IR系统针对每个查询获得的检索结果，并使用合并过程对其进行评估。在本文中，我们重点介绍CLEF eHealth 2013和2014s的检索任务，该任务根据患者的信息需求及其医疗出诊摘要创建了主题。我们概述了创建的任务和数据集，以及参与团队在过去两年中获得的结果。然后，我们提供结果的详细比较分析，并根据这些结果对数据集进行评估。这项对评估活动的双重研究使我们了解了医疗IR的技术方面，例如查询扩展的有效性； CLEF eHealth IR数据集的质量和特征，例如可靠性；以及如何在医学领域开展IR评估活动。

著录项

相似文献

  • 外文文献
  • 中文文献
  • 专利
获取原文

客服邮箱：kefu@zhangqiaokeyan.com

京公网安备：11010802029741号 ICP备案号：京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有

  • 客服微信

  • 服务号