基于Spark Streaming的高校网站敏感信息监测设计与实现

王丹; 邓谦; 刘姣

首页> 中文期刊> 《科教导刊》 >基于Spark Streaming的高校网站敏感信息监测设计与实现

基于Spark Streaming的高校网站敏感信息监测设计与实现

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

高校在实现智慧化的同时也面临着网站发布信息或网页内容被黑客篡改成不符合国家或学校规定的信息及内容.通过对已有学术研究发现,现有技术的研究普遍存在着效率低、实时性差的问题,本文提出了一种基于Spark Streaming的高校网站敏感信息监测系统.该系统利用Kafka作为中间存储,系统架构在Spark Streaming框架上可实时消费Kafka中数据进行链接解析处理,将获取到的网页内容存储到Elastic Search中进行倒排索引敏感信息匹配,从而达到数据采集和数据处理同步,提高了网站监测效率.

著录项

来源
《科教导刊》 |2021年第5期|40-4144|共3页
作者
王丹; 邓谦; 刘姣;
展开▼
作者单位

江苏科技大学信息化建设与管理办公室江苏·镇江 212000;

江苏科技大学信息化建设与管理办公室江苏·镇江 212000;

江苏科技大学信息化建设与管理办公室江苏·镇江 212000;

展开▼
原文格式 PDF
正文语种 chi
中图分类程序设计、软件工程;
关键词
Spark Streaming; Kafka; Elastic Search; 敏感信息监测; 倒排索引;

相似文献

中文文献
外文文献
专利

1. 基于Spark Streaming的实时数据处理系统设计与实现 [J] . 施炤 . 现代信息科技 . 2020,第020期
2. 基于Spark Streaming的实时数据处理系统设计与实现 [J] . 施炤 . 现代信息科技 . 2020,第020期
3. 基于ELK和Spark Streaming的日志分析系统设计与实现 [J] . 李祥池 . 电子科学技术 . 2015,第006期
4. 基于Spark Streaming的视频大数据并行处理方法 [J] . 张元鸣 ,虞家睿 ,陆佳炜 . 计算机工程与科学 . 2021,第010期
5. 一种基于深度强化学习的Spark Streaming参数优化方法 [J] . 刘露 ,申国伟 ,郭春 . 计算机与现代化 . 2021,第010期
6. 基于GPRS技术的供水网络信息监测系统的设计与实现 [C] . 梁冬 ,周春月 . 第十一届全国青年通信学术会议 . 2006
7. 基于Spark Streaming的实时新闻推荐平台的设计与实现 [A] . 崔博 . 2018

基于Spark Streaming的高校网站敏感信息监测设计与实现

摘要

著录项

相似文献

相关主题

期刊订阅