分布式数据集成管理工具的研究与实践

衡星辰; 张诗军; 陈丰; 甘杉

首页> 中文期刊> 《自动化与仪器仪表》 >分布式数据集成管理工具的研究与实践

分布式数据集成管理工具的研究与实践

开具论文收录证明 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

随着大数据时代的到来,企业管理着规模庞大的数据资产,为满足企业日常批量数据集成、数据批量共享交换、数据分析的需求,本研究针对企业日常批量数据集成、数据批量共享交换、数据分析的工作的现状和难点,以及传统集中式数据集成管理工具存在的不足,提出了分布式数据集成管理工具解决方案,通过多节点、多线程的作业模式和智能化作业调度关键技术研究,完成了分布式数据集成管理工具搭建,并进行了试点应用,完成50亿条数据的抽取转换工作从82小时缩短至16小时,12亿条数据的抽取转换工作从19小时的抽取工作缩短至4小时,有效提升了数据集成效率。

著录项

来源
《自动化与仪器仪表》 |2017年第5期|33-36|共4页
作者
衡星辰; 张诗军; 陈丰; 甘杉;
展开▼
作者单位

中国南方电网有限责任公司;

广东广州510000;

展开▼
原文格式 PDF
正文语种 chi
中图分类计算机仿真;
关键词
分布式; 数据集成; 多线程;

相似文献

中文文献
外文文献
专利

1. 分布式数据库中数据集成与共享的研究进展 [J] . 奥勇 ,李美丽 ,赵永华 . 科技与创新 . 2020,第1期
2. 分布式数据库中数据集成与共享的研究进展 [J] . 奥勇 ,李美丽 ,赵永华 . 微计算机信息 . 2020,第1期
3. 分布式异构数据集成系统的研究与分析 [J] . 周莹 . 数字技术与应用 . 2018,第7期
4. 分布式异构数据集成系统的研究与分析 [J] . 周莹 . 数字技术与应用 . 2018,第7期
5. 面向数据集成的分布式ETL研究与设计 [J] . 张孟春 . 软件导刊 . 2017,第11期
6. 分布式异构数据集成技术研究 [C] . 段宁 ,陈希 ,谭罡 . 中国空气动力学会测控技术专委会第六届二次学术交流会 . 2011
7. 保障信息系统数据集成管理工具的研究与实现 [A] . 李莉 . 2014

分布式数据集成管理工具的研究与实践

摘要

著录项

相似文献

相关主题

期刊订阅