首页> 中文会议>第33届中国数据库学术会议（NDBC2016 ） >大数据分类挖掘算法及其概念漂移应用研究

大数据分类挖掘算法及其概念漂移应用研究

页面导航

摘要
著录项
相似文献
相关主题

摘要

随着大数据应用研究的不断深入和分布式机器学习中流计算框架的涌现,针对数据流中概念漂移问题的研究是面向大数据挖掘领域的研究热点之一.现有的针对概念漂移的研究成果主要还是依赖于数据结构和算法优化上,主要还是通过计算资源有限的独立计算机完成概念漂移的检测.为此,本文提出一种面向大数据的基于Storm的抵抗概念漂移的分类挖掘算法及系统.该系统采用并行化窗口和S-CVFDT算法,利用并行化窗口机制检测数据流中的突变型概念漂移从而自适应的改变并行窗口大小,并通过S-CVFDT算法不断更新渐进性概念漂移时的模型.分析与实验结果表明:该算法可以快速有效地检测到突变型概念漂移降低系统因为突变型概念漂移造成的资源浪费,且模型建立效率、分类精度得到提高.

著录项

来源
《第33届中国数据库学术会议（NDBC2016 ）》|2016年|1-11|共11页
会议地点深圳
作者
Lu Lili; 陆莉莉; Zhang Yongpan; 张永潘; Tan Hiayu; 谈海宇; Ji Yimu; 季一木;
展开▼
作者单位

中国计算机学会;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类 TP311.13;
关键词
大数据; 分类挖掘算法; 概念漂移; 并行化窗口;

相似文献

中文文献
外文文献
专利

1. 大数据分类挖掘算法及其概念漂移应用研究 [J] . 陆莉莉 ,张永潘 ,谈海宇 . 计算机科学与探索 . 2016,第012期
2. 大数据背景下引入多重选择机制分类挖掘带概念漂移的高速数据流优化算法 [J] . 郭锋锋 . 九江学院学报（自然科学版） . 2019,第003期
3. 大数据背景下引入多重选择机制分类挖掘带概念漂移的高速数据流优化算法 [J] . 郭锋锋 . 九江学院学报：自然科学版 . 2019,第003期
4. 基于Storm平台的流挖掘算法及抵抗概念漂移系统的设计与实现 [J] . 陆元福 ,彭天慈 ,季开洋 . 电脑知识与技术 . 2016,第009期
5. 概念漂移数据流挖掘算法综述 [J] . 丁剑 ,韩萌 ,李娟 . 计算机科学 . 2016,第12期
6. 关联规则挖掘算法在分类中的应用研究 [C] . 王曙燕 ,王晓梅 . 2009年全国理论计算机科学学术年会 . 2009
7. 面向大数据的流分类挖掘算法及其概念漂移应用研究 [A] . 谈海宇 . 2016

大数据分类挖掘算法及其概念漂移应用研究

摘要

著录项

相似文献

相关主题

期刊订阅