首页> 中国专利> 一种MapReduce计算模型中基于遗传算法的数据平衡方法

一种MapReduce计算模型中基于遗传算法的数据平衡方法

摘要

一种MapReduce计算模型中基于遗传算法的数据平衡方法,先获取全局Map输出信息,利用遗传算法进行组合优化:先将元数据收集,进行编码,然后对种群进行多次随机划分,每次划分形成一个基因组,计算每个基因中所有子集的适应度函数值,并计算出每个目标函数的概率,对每一个基因的适应度进行评价的基础上将选择算子应用于基因组,利用轮盘赌算法随机的选择出基因组中的若干个优质基因,对选出来的基因进行交叉运算,再进行变异操作,经过多轮进化之后依据精英保留策略选择保留的基因,并对基因进行解码,就可获得对元数据的一个优化的组合,保证每个reducer所处理的数据量是近似相等的,本发明解决了reduce阶段输入数据不均衡的问题,节约计算资源,减少计算成本。

著录项

  • 公开/公告号CN103106253B

    专利类型发明专利

  • 公开/公告日2016-05-04

    原文格式PDF

  • 申请/专利权人 西安交通大学;

    申请/专利号CN201310015988.4

  • 发明设计人 伍卫国;樊源泉;魏伟;朱霍;高颜;

    申请日2013-01-16

  • 分类号G06F17/30(20060101);G06N3/12(20060101);

  • 代理机构61215 西安智大知识产权代理事务所;

  • 代理人贺建斌

  • 地址 710049 陕西省西安市碑林区咸宁西路28号

  • 入库时间 2022-08-23 09:39:02

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2016-05-04

    授权

    授权

  • 2013-06-12

    实质审查的生效 IPC(主分类):G06F 17/30 申请日:20130116

    实质审查的生效

  • 2013-05-15

    公开

    公开

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号