首页> 中文期刊> 《中文信息学报》 >基于版块的论坛增量搜集策略

基于版块的论坛增量搜集策略

         

摘要

该文研究论坛的增量搜集问题.由于在论坛中同一主题通常分布在多个页面上,而传统增量搜集技术的抓取策略通常是基于单个页面,因此这些技术并不适于对论坛增量搜集.该文通过对许多论坛中版块变化规律的统计分析,提出了基于版块的论坛增量搜集策略.该策略将属于同一版块的所有页面看做一个整体,以它做为抓取的基本单位.同时该策略利用版块权重和局部时间规律确定抓取频率和抓取时间点.实验结果表明本策略对新增和新回复帖子的平均召回率为99.3%,并且与平均调度方法相比系统总延迟最高可减小42%.

著录项

相似文献

  • 中文文献
  • 外文文献
  • 专利
获取原文

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号