高性能计算环境中日志模式提炼方法的研究

王晓东; 赵一宁; 肖海力; 王小宁; 迟学斌

首页> 中文期刊> 《计算机科学与探索》 >高性能计算环境中日志模式提炼方法的研究

高性能计算环境中日志模式提炼方法的研究

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

日志分析对于计算机系统的稳定运行起着至关重要的作用,然而日志通常是非结构化的,不利于自动化分析,如何自动化将日志的模式提炼出来并变成结构化的数据具有重要的实际意义。提出了LDmatch算法,该算法以单词匹配率为基础实现了一种日志模式提炼算法。传统的日志匹配算法在进行相似度计算时使用一对一单词匹配法,而LDmatch算法根据两条日志所包含的单词之间的最长公共子序列计算日志之间的相似度,并以此为基础进行日志分类。LDmatch算法还能实时得到日志模板并更新。除此之外,该算法的模式仓库使用了基于哈希表的数据结构进行存储,该存储结构细化了日志的分类,减少了日志匹配时的比较次数,从而提高了日志模式提炼算法的匹配效率。为了验证算法的优势,将LDmatch算法应用于开源数据集以及国家高性能计算环境实际产生的日志数据集,并且使用多种其他日志模式提炼算法进行对比并得出实验结果,最终证明了该算法在准确度、鲁棒性和效率上具有优势。

著录项

来源
《计算机科学与探索》 |2022年第10期|2264-2272|共9页
作者
王晓东; 赵一宁; 肖海力; 王小宁; 迟学斌;
展开▼
作者单位

中国科学院计算机网络信息中心;

中国科学院大学;

展开▼
原文格式 PDF
正文语种 chi
中图分类操作系统;
关键词
日志模式提炼; 单词匹配率; 日志模板; 哈希表;

相似文献

中文文献
外文文献
专利

1. 气象高性能计算环境中模式协同研发管理 [J] . 赵春燕 ,孙婧 ,胡江凯 . 计算机与现代化 . 2022,第6期
2. 富媒体环境下信息交流模式及通用组件的研究——基于RIA技术的FLASH网络日志的研究 [J] . 李伟平 ,罗晖 . 天津科技 . 2007,第6期
3. 大数据环境下高性能计算在研究生教育中的创新改革 [J] . 谢晓兰 ,谷晓峰 ,廖文琦 . 求知导刊 . 2017,第015期
4. 基于高性能计算环境的LOD技术在虚拟现实中的研究与应用 [J] . 刘光明 ,贾彦平 ,田全红 . 计算机光盘软件与应用 . 2014,第020期
5. 一种从无“aba”模式的日志中挖掘2度循环的方法 [J] . 林雷蕾 ,周华 ,代飞 . 软件学报 . 2018,第11期
6. 高性能计算环境下基于预约-提交模式的数据移动算法研究 [C] . 汤小春 ,刘海龙 ,张延园 . 第十三届全国信息存储技术学术会议 . 2004
7. 数据集成环境中基于日志的视图监视方法研究与实现 [A] . 何杨平 . 2003

高性能计算环境中日志模式提炼方法的研究

摘要

著录项

相似文献

相关主题

期刊订阅