一种脉冲神经网络计算负载的通信稀疏化方法
基本信息
申请号 | CN202110233847.4 | 申请日 | - |
公开(公告)号 | CN112835844A | 公开(公告)日 | 2021-05-25 |
申请公布号 | CN112835844A | 申请公布日 | 2021-05-25 |
分类号 | G06F15/173;G06N3/04 | 分类 | 计算;推算;计数; |
发明人 | 柴志雷;刘家航;王涛;白云;王皓洋;尤佳 | 申请(专利权)人 | 苏州蓝甲虫机器人科技有限公司 |
代理机构 | 无锡盛阳专利商标事务所(普通合伙) | 代理人 | 张宁;黄莹 |
地址 | 215000 江苏省苏州市姑苏区阊胥路483号 | ||
法律状态 | - |
摘要
摘要 | 本发明提供一种脉冲神经网络计算负载的通信稀疏化方法,其有效解决了分布式平台通信效率可扩展性问题,随着分布式计算平台中计算节点的逐渐增加,有效的解决了计算效率逐渐下降的问题。在本专利的技术方案中,基于重分布操作将神经元重新分布在每个节点上,每个节点上分配的神经元在此节点中拥有最多的突触后神经元,节点与节点之间基于非阻塞通信模式,每次通信过程中,每个节点都将脉冲数据异步发送给其所有的目标节点,并等待接收其源节点发送的脉冲,即,每个节点只发送必要的数据给本次通信的目标节点,而不会与非目标节点通信,避免与非相邻进程交流。 |
