分布式JS解析在Web信息采集系统中的应用

梁元

首页> 中文期刊> 《电子技术与软件工程》 >分布式JS解析在Web信息采集系统中的应用

分布式JS解析在Web信息采集系统中的应用

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

本文为了能够突破原本网页信息采集系统无法实现脚本解析的动态化信息采集技术弊端,提出在Web信息采集系统中运用分布式JS解析技术。首先概述JS解析脚本语言常用引擎技术,并实现JS解析结合Hadoop分布式计算,提取解析系统的实际运行所处异构集群环境,基于原本Nutch系统文件的存储结构基础之上,设计整体系统文件数据结构及存储格式。发现设计的该分布式JS解析应用于Web信息采集系统思路,能够动态化、高效且准确的实现Web信息采集,为该领域提出出信息采集技术新思路。

著录项

来源
《电子技术与软件工程》 |2020年第10期|P.163-164|共2页
作者
梁元;
展开▼
作者单位

中国航发贵州黎阳航空动力有限公司贵州省贵阳市550014;

展开▼
原文格式 PDF
正文语种 chi
中图分类计算技术、计算机技术;
关键词
分布式JS解析; Web信息采集; Hadoop调度算法;

相似文献

中文文献
外文文献
专利

1. 分布式Web信息采集系统的设计与实现 [J] . 金岳富 ,范剑英 ,冯扬 . 哈尔滨理工大学学报 . 2010,第001期
2. 分布式Web信息采集系统的研究与设计 [J] . 李盛韬 ,成绫 ,余智华 . 计算机工程与应用 . 2003,第016期
3. 基于Web-Harvest的Web铁路信息采集系统的设计与应用 [J] . 汤立 ,李雪山 . 铁路计算机应用 . 2013,第003期
4. 基于．NET的Web框架在用电信息采集系统中的应用 [J] . 韩勇 ,高会生 ,顾博 . 微型机与应用 . 2012,第020期
5. 嵌入式Web服务器在中小水电信息采集系统中的应用 [J] . 王坤 ,汪晓岩 ,蔡世龙 . 水电自动化与大坝监测 . 2006,第006期
6. Web Service技术及其在分布式工作流系统中的应用研究 [C] . 寿志勤 ,李乐明 . OA’2005第九届办公自动化国际学术研讨会 . 2005
7. 分布式JS解析在web信息采集系统中的研究与应用 [A] . 郑学通 . 2014

分布式JS解析在Web信息采集系统中的应用

摘要

著录项

相似文献

相关主题

期刊订阅