首页> 中文会议>中国教育和科研计算机网CERNET第十七届学术年会 >天网FTP搜索引擎增量搜集系统构架的设计与评测

天网FTP搜索引擎增量搜集系统构架的设计与评测

页面导航

摘要
著录项
相似文献
相关主题

摘要

针对天网FTP搜索引擎搜集系统存在全量搜集周期过长导致检索误差大、效率低的不足，基于真实实验数据分析和总结FTP站点分布和变化特征，提出一种高效的FTP站点RANK模型以及相应的增量搜集策略；设计并实现增量搜集模型和站点的更新度预测算法。同时，针对模型和算法建立测试集和定义评测标准，对增量搜集模型不同参数组合的运行效果进行实验评测，最终得出一种适合FTP增量搜集系统的最优扫描策略：基于站点RANK及上次变化历史的更新度预测算法组合能够以较低成本抓取每天变化的主要数据，并很好地缩短索引更新周期，取得较好的增量搜集效果。目前，本设计系统已部署在深圳大学城网络中心的FTP搜索引擎上，并取得了很好的运行效果。

著录项

来源
《中国教育和科研计算机网CERNET第十七届学术年会》|2010年|310-316|共7页
会议地点长沙
作者
雷凯; 叶牡丹; 吴刚刚; 袁虎声; 孙涛;
展开▼
作者单位

中国教育和科研计算机网;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类检索机;
关键词
FTP搜索引擎; 站点分布; 增量搜集; 系统构架;

相似文献

中文文献
外文文献
专利

1. 搜索引擎增量式搜集的实现与评测 [J] . 雷凯 ,王东海 . 计算机工程 . 2008,第013期
2. FTP服务器王者之战——11款FTP Daemon完全评测 [J] . . 在线 . 2004,第005期
3. 高校 FTP搜索引擎的设计与实现 [J] . 陈道存 ,刘斌 ,张鑫 . 蚌埠学院学报 . 2015,第003期
4. 基于Lucene的FTP搜索引擎的设计与实现 [J] . 许昊 ,王跃胜 . 福建电脑 . 2012,第007期
5. 基于内容的分布式FTP搜索引擎的设计与实现 [J] . 许君 ,王朝坤 ,李瑞 . 计算机研究与发展 . 2011,第0z2期
6. 天网千帆——一种新型文件搜索引擎 [C] . 谢欣 ,刘菲菲 ,李晓明 . 第二届全国搜索引擎和网上信息挖掘学术研讨会(SEWM2004) . 2004
7. 基于客户反馈的FTP搜索引擎的研究与设计 [A] . 轩春青 . 2011

天网FTP搜索引擎增量搜集系统构架的设计与评测

摘要

著录项

相似文献

相关主题

期刊订阅