用于深度神经网络的多底数对数量化方法及装置
基本信息
申请号 | CN201811300010.1 | 申请日 | - |
公开(公告)号 | CN109376854A | 公开(公告)日 | 2019-02-22 |
申请公布号 | CN109376854A | 申请公布日 | 2019-02-22 |
分类号 | G06N3/063(2006.01)I | 分类 | 计算;推算;计数; |
发明人 | 邹卓; 环宇翔; 徐佳唯; 郑立荣 | 申请(专利权)人 | 矽魅信息科技(上海)有限公司 |
代理机构 | - | 代理人 | - |
地址 | 200000 上海市嘉定区环城路2222号3幢1010室 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种用于深度神经网络的多底数对数量化方法及装置,其中,用于深度神经网络的多底数对数量化方法包括:通过N‑bit量化,将深度神经网络中所有权值或输入用2N个定点数表示,其中2N‑1个定点以2为底,2N‑1个定点以为底;确定所述深度神经网络中所有权值以2为底的数值范围SR_1和以为底的数值范围SR_2;将上述以2为底的数值范围SR_1和以为底的数值范围SR_2进行量化;将上述量化后的数值的指数在各自分段的Log域上均匀分布。以实现提高神经网络模型的准确率的优点。 |
