首页> 中国专利> 一种基于Hadoop云计算平台的MapReduce作业流式调度方法及调度系统

一种基于Hadoop云计算平台的MapReduce作业流式调度方法及调度系统

摘要

本发明公开了一种基于Hadoop云计算平台的MapReduce作业流式调度方法及调度系统,其通过将源数据进行实时汇聚、存储至Hadoop云平台;为作业启动指定相应的策略,如定时准时启动或者等此粒度对应时间段内的数据全部汇聚完毕;给单步、多步的作业指定对应的启动脚本,启动系统,通过程序高效、智能的控制作业的运行。通过本发明,可以给每个粒度的作业指定单独的策略,控制不同粒度的作业按照不同的策略保证其安全性;通过“流”的思想控制作业分步、快速的完成。

著录项

  • 公开/公告号CN103399787B

    专利类型发明专利

  • 公开/公告日2016-09-14

    原文格式PDF

  • 申请/专利号CN201310339780.8

  • 发明设计人 李成金;郑驰;

    申请日2013-08-06

  • 分类号

  • 代理机构北京庆峰财智知识产权代理事务所(普通合伙);

  • 代理人刘元霞

  • 地址 100192 北京市海淀区学清路8号科技财富中心A座11层

  • 入库时间 2022-08-23 09:47:21

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2016-09-14

    授权

    授权

  • 2013-12-18

    实质审查的生效 IPC(主分类):G06F 9/46 申请日:20130806

    实质审查的生效

  • 2013-11-20

    公开

    公开

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号