一种脉冲神经网络计算负载的通信稀疏化方法

基本信息

申请号 CN202110233847.4 申请日 -
公开(公告)号 CN112835844A 公开(公告)日 2021-05-25
申请公布号 CN112835844A 申请公布日 2021-05-25
分类号 G06F15/173;G06N3/04 分类 计算;推算;计数;
发明人 柴志雷;刘家航;王涛;白云;王皓洋;尤佳 申请(专利权)人 苏州蓝甲虫机器人科技有限公司
代理机构 无锡盛阳专利商标事务所(普通合伙) 代理人 张宁;黄莹
地址 215000 江苏省苏州市姑苏区阊胥路483号
法律状态 -

摘要

摘要 本发明提供一种脉冲神经网络计算负载的通信稀疏化方法,其有效解决了分布式平台通信效率可扩展性问题,随着分布式计算平台中计算节点的逐渐增加,有效的解决了计算效率逐渐下降的问题。在本专利的技术方案中,基于重分布操作将神经元重新分布在每个节点上,每个节点上分配的神经元在此节点中拥有最多的突触后神经元,节点与节点之间基于非阻塞通信模式,每次通信过程中,每个节点都将脉冲数据异步发送给其所有的目标节点,并等待接收其源节点发送的脉冲,即,每个节点只发送必要的数据给本次通信的目标节点,而不会与非目标节点通信,避免与非相邻进程交流。