面向ETL数据处理过程的优化研究

张晓冉; 舒昝

首页> 中文期刊> 《自动化与仪器仪表》 >面向ETL数据处理过程的优化研究

面向ETL数据处理过程的优化研究

开具论文收录证明 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

针对ETL数据处理的数据转换阶段进行研究与优化,为了进一步提高数据处理的效率,对数据处理的规则进行优化合并,减少了相关进程的数目以及存储空间的消耗。另外引入了Map TrimReduce编程模型对ETL的大量数据进行分布式处理,规则上的优化处理也进一步缩短了MTR三个部分的执行次数,达到提高整体ETL数据处理效率的目的。

著录项

来源
《自动化与仪器仪表》 |2016年第7期|109-110|共2页
作者
张晓冉; 舒昝;
展开▼
作者单位

东北石油大学计算机与信息技术学院;

黑龙江大庆163318;

展开▼
原文格式 PDF
正文语种 chi
中图分类 TP311.13;
关键词
ETL; 数据处理规则; Map-Trim-Reduce;

相似文献

中文文献
外文文献
专利

1. 军械装备保障数据仓库中的ETL过程优化研究 [J] . 谢峰 ,孙江生 ,张西山 . 计算机测量与控制 . 2015,第5期
2. ETL执行过程的优化研究 [J] . 吴远红 . 计算机科学 . 2007,第1期
3. 面向协同设计过程协调和优化的集成过程管理研究 [J] . 邱浩波 ,邵新宇 ,高亮 . 机床与液压 . 2007,第2期
4. 面向液压挖掘机优化设计过程的专题知识库研究 [J] . 陈加才 ,李翔龙 ,唐昊 . 机械设计与制造 . 2023,第4期
5. 面向制造装配过程的大数据分析与调度优化研究 [J] . SONG Hai-tao ,LU Tao ,LI Shi-qiang . 装备制造技术 . 2018,第10期
6. 面向超高分辨率全球大气模式初始化过程的内存需求优化研究 [C] . Liu Zhao ,刘钊 ,He Xiang . 2016年全国高性能计算学术年会 . 2016
7. 面向医学领域数据仓库的ETL过程研究与实现 [A] . 胡吉晶 . 2010

面向ETL数据处理过程的优化研究

摘要

著录项

相似文献

相关主题

期刊订阅