多次迭代的深度神经网络压缩方法

基本信息

申请号 CN201611105480.3 申请日 -
公开(公告)号 CN107679617B 公开(公告)日 2021-04-09
申请公布号 CN107679617B 申请公布日 2021-04-09
分类号 G06N3/04(2006.01)I;G06N3/08(2006.01)I 分类 计算;推算;计数;
发明人 李鑫;韩松;孙世杰;单羿 申请(专利权)人 北京深鉴科技有限公司
代理机构 北京卓孚律师事务所 代理人 任宇
地址 100029北京市朝阳区安定路5号院5号楼6层101号10层01-19单元
法律状态 -

摘要

摘要 本申请公开了一种压缩神经网络的方法,其中神经网络的各个神经元之间的权重由多个矩阵表示,该方法包括:敏感度分析步骤,用于分析多个矩阵中的每个矩阵的灵敏度,以及确定各个矩阵的初始压缩比;压缩步骤,用于基于初始压缩比对各个矩阵进行压缩,以获得压缩后的神经网络;和重训步骤,用于重训压缩后的神经网络。本发明还公开了一种压缩神经网络的装置。