首页> 中国专利> 确定URL爬虫优先级的方法、爬虫方法、介质及爬虫系统

确定URL爬虫优先级的方法、爬虫方法、介质及爬虫系统

页面导航

摘要
著录项
法律信息
相似文献

摘要

本申请公开了一种确定URL爬虫优先级的方法、爬虫方法、介质及爬虫系统，属于通信计算机技术领域。该确定URL爬虫优先级方法包括：根据URL队列中的种子URL对应网页的重要程度，确定种子URL的爬虫优先级；根据种子URL的爬虫优先级，确定相应种子URL对应网页的爬虫优先顺序和、或爬虫频率；以及依据爬虫优先顺序和、或爬虫频率，对相应的网页进行爬虫。本申请的应用确定种子URL的爬虫优先级，提高网络爬虫的效率。

著录项

公开/公告号CN114625947A

专利类型发明专利
公开/公告日2022-06-14

原文格式PDF
申请/专利权人北京四维图新科技股份有限公司;
展开▼

申请/专利号CN202011463085.9
发明设计人王伟;王亮;
展开▼

申请日2020-12-11
分类号G06F16/951;G06F16/955;G06F9/48;G06F9/54;
代理机构北京国科程知识产权代理事务所(普通合伙);
代理人曹晓斐
地址 100094 北京市海淀区丰豪东路四维图新大厦A座10层
入库时间 2023-06-19 15:39:57

法律信息

法律状态公告日

法律状态信息

法律状态
2022-06-14

公开

发明专利申请公布

相似文献

专利
中文文献
外文文献

1. 一种爬虫系统的URL爬取方法、装置、介质及电子设备 [P] . 中国专利： CN112836111B . 2022.05.31
2. 一种爬虫系统的URL爬取方法、装置、介质及电子设备 [P] . 中国专利： CN112836111A . 2021-05-25
3. 去隔行插值方法、装置及系统、视频处理方法和存储介质 [P] . 世界知识产权组织专利： WO2020/142916A1 . 2020.07.16
4. 一种输出功率的调节方法、设备、系统及存储介质 [P] . 世界知识产权组织专利： WO2020/142891A1 . 2020.07.16
5. 基于智能合约的收款方法、系统及可读存储介质 [P] . 世界知识产权组织专利： WO2020/143378A1 . 2020.07.16