面向主题的网络蜘蛛技术研究及系统实现

张博; 蔡皖东

首页> 中文期刊> 《微电子学与计算机》 >面向主题的网络蜘蛛技术研究及系统实现

面向主题的网络蜘蛛技术研究及系统实现

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

首先研究了面向主题的网络蜘蛛的关键技术:抓取目标描述、网页分析算法和网页搜索策略等,在此基础上,设计并实现了一个面向主题的网络蜘蛛系统(简称主题蜘蛛),采用向量空间模型来计算网页的主题相关度,使用改进的Shark-Search网页搜索策略来决定待抓取链接的访问次序,从种子网页开始,只爬行具有较高预测相关度的链接,仅采集与主题相关的网页,多线程对网页进行下载和分析,提高了主题网页采集的精度.

著录项

来源
《微电子学与计算机》 |2009年第5期|52-55|共4页
作者
张博; 蔡皖东;
展开▼
作者单位

西北工业大学计算机学院;

展开▼
原文格式 PDF
正文语种 chi
中图分类计算机网络;
关键词
信息收集; 主题蜘蛛; 相关度计算; 搜索策略;

相似文献

中文文献
外文文献
专利

1. 面向博客的智能网络蜘蛛技术及其系统实现 [J] . 原舒雨 ,蔡皖东 ,李勇军 . 微电子学与计算机 . 2011,第1期
2. 面向职业教育的主题蜘蛛的设计与实现 [J] . 马建华 . 电脑知识与技术 . 2008,第027期
3. 治安卡口网络监控系统软硬件技术研究与实现rn治安卡口网络监控系统软硬件技术研究与实现 [J] . . 计算机应用研究 . 2000,第012期
4. 面向互联网视频主题管理的搜索引擎关键技术研究及实现 [J] . 周利民 ,童珉 ,陈燕双 . 广播与电视技术 . 2014,第006期
5. 面向专用信息获取的用户定制主题网络爬虫技术研究 [J] . 薛丽敏 ,吴琦 ,李骏 . 信息网络安全 . 2017,第002期
6. 面向互联网视频主题管理的搜索引擎关键技术研究及实现 [C] . 周利民 ,童珉 ,陈燕双 . 中国新闻技术工作者联合会第六次全员代表大会暨2014年学术年会 . 2014
7. 面向企业竞争情报的主题网络蜘蛛的研究与实现 [A] . 刘德钦 . 2011

面向主题的网络蜘蛛技术研究及系统实现

摘要

著录项

相似文献

相关主题

期刊订阅