首页> 中国专利> 在神经网络推理中实现数据同步的装置和方法

在神经网络推理中实现数据同步的装置和方法

摘要

本申请提供了在神经网络推理中实现数据同步的装置和方法。涉及人工智能(Artificial Intelligence,AI)领域,具体涉及神经网络推理技术。该装置包括:存储器,用于存储第一特征图;神经网络处理器NPU,用于:从所述存储器中获取所述第一特征图,所述第一特征图包含M个分块,M为正整数;利用异步方式对所述M个分块分别执行神经网络模型中至少两层的推理计算以得到M个推理结果,该异步方式是指对每个分块执行完所述神经网络模型中一层的推理计算所得到的中间结果不进行数据同步,并且继续对所述中间结果执行下一层的推理计算;将所述M个推理结果进行数据同步以得到同步后的数据。由于该NPU在执行完神经网络模型中至少两层的推理计算之后才进行数据同步,这使得在神经网络推理过程中进行数据同步的次数较少,进而产生较少的数据搬迁开销。

著录项

  • 公开/公告号CN113169989A

    专利类型发明专利

  • 公开/公告日2021-07-23

    原文格式PDF

  • 申请/专利权人 华为技术有限公司;

    申请/专利号CN201980051147.4

  • 发明设计人 王岩岩;冯源;吴祖光;周鹏;

    申请日2019-12-31

  • 分类号H04L29/08(20060101);G06N3/04(20060101);

  • 代理机构

  • 代理人

  • 地址 518129 广东省深圳市龙岗区坂田华为总部办公楼

  • 入库时间 2023-06-19 11:55:48

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2023-02-28

    发明专利申请公布后的驳回 IPC(主分类):H04L29/08 专利申请号:2019800511474 申请公布日:20210723

    发明专利申请公布后的驳回

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号