首页> 中国专利> 收集网站信息中有效信息网页的方法、装置及系统

收集网站信息中有效信息网页的方法、装置及系统

摘要

本发明公开一种收集网站信息中有效信息网页的方法、装置及系统,该方法主要包括:根据预先配置的列表页的网址链接模板识别被收集网站中的列表页,获取每个列表页包所含的全部内部网址链接;根据预先配置的商品页的网址链接模板,在每个列表页包含的全部内部网址链接中进行匹配,获取其中商品页的网址链接,其中,所述预先配置的商品页的网址链接模板包含产品属性信息;收集所获取的所有商品页的网址链接。本发明以解决网络爬虫系统中爬取的结果不稳定以及网络爬虫系统消耗很大资源的问题。

著录项

  • 公开/公告号CN102867053A

    专利类型发明专利

  • 公开/公告日2013-01-09

    原文格式PDF

  • 申请/专利号CN201210337847.X

  • 发明设计人 周雷;高扬;

    申请日2012-09-12

  • 分类号G06F17/30;

  • 代理机构北京国昊天诚知识产权代理有限公司;

  • 代理人许志勇

  • 地址 100088 北京市西城区新街口外大街28号D座112室(德胜园区)

  • 入库时间 2024-02-19 16:35:27

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2017-03-22

    发明专利申请公布后的驳回 IPC(主分类):G06F17/30 申请公布日:20130109 申请日:20120912

    发明专利申请公布后的驳回

  • 2013-02-20

    实质审查的生效 IPC(主分类):G06F17/30 申请日:20120912

    实质审查的生效

  • 2013-01-09

    公开

    公开

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号