首页> 中文会议>2015全国高性能计算学术年会 >Sparg:基于Spark的网络图片隐写分析系统

Sparg:基于Spark的网络图片隐写分析系统

页面导航

摘要
著录项
相似文献
相关主题

摘要

网络图像具有数据规模大、产生速度快、异构等特点,对其进行分析处理有很强的扩展性、准确性与实时性等要求.本文以JPEG图像隐写分析作为主要分析方法,利用HDFS/HBase等分布式存储技术实现大规模网络图像的存储,并在此基础上利用Spark分布式计算技术加速图像分析处理.实验结果表明,在一个3节点小型Spark集群的处理性能较单节点有较大提升,数据集构造过程实现3倍加速,隐写分析过程实现3到4倍加速.最后,基于以上技术和原型系统实现,提出了一种分布式的、线上线下集成的、多协作的大规模网络图片数据处理框架.

著录项

来源
《2015全国高性能计算学术年会》|2015年|609-612|共4页
会议地点无锡
作者
Zeng Jianqiang; 曾建强; Qi Jun; 齐俊; Guo Xiangyu; 郭翔宇; Du Zhihui;
展开▼
作者单位

中国计算机学会;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类 TP391.41;
关键词
网络图像; 隐写分析; 分布式计算; 数据处理;

相似文献

中文文献
外文文献
专利

1. 基于Hadoop和Spark的可扩展性化工类大数据分析系统设计 [J] . 尹旭熙 . 粘接 . 2021,第006期
2. 基于Spark的商品推荐系统的设计与实现 [J] . 吴飞贤 ,段华斌 ,扈乐华 . 办公自动化 . 2021,第003期
3. 基于Spark框架的电影推荐系统的实现 [J] . 赖丽君 . 鄂州大学学报 . 2021,第002期
4. 基于Spark平台的网络攻击检测系统 [J] . 龚剑敏 ,颜涛 ,周亮 . 电脑知识与技术 . 2021,第004期
5. 基于Spark和微服务架构的电影推荐系统设计与实现 [J] . 史爱武 ,李险贵 . 电脑知识与技术 . 2021,第005期
6. 如何基于Alluxio提升Spark和Hadoop HDFS的数据访问性能与系统稳定性 [C] . 顾荣 . 2017中国数据库技术大会 . 2018
7. 基于文字识别的敏感网络图片审查系统的设计与实现 [A] . 向导 . 2014

Sparg:基于Spark的网络图片隐写分析系统

摘要

著录项

相似文献

相关主题

期刊订阅