一种基于Attention-LSTM网络的视频行为识别方法专利查询专利号|摘要-满商公司网

一种基于Attention-LSTM网络的视频行为识别方法

基本信息

申请号	CN201811397129.5	申请日	-
公开（公告）号	CN109740419B	公开（公告）日	2021-03-02
申请公布号	CN109740419B	申请公布日	2021-03-02
分类号	G06N3/08(2006.01)I;G06K9/00(2006.01)I;G06N3/04(2006.01)I	分类	计算；推算；计数;
发明人	陆生礼;庞伟;向丽苹;范雪梅;舒程昊;吴成路;阮小千;梁彪;邹涛	申请（专利权）人	南京三宝科技股份有限公司
代理机构	南京经纬专利商标代理有限公司	代理人	施昊
地址	214135江苏省无锡市新吴区菱湖大道99号
法律状态	-

摘要

本发明公开了一种基于Attention‑LSTM网络的视频行为识别方法。通过光流图序列生成模块对输入的RGB图序列进行变换，得到光流图序列；将光流图序列与原RGB图序列输入时域注意力取帧模块，分别选取两种图序列中非冗余的关键帧；将两种图的关键帧序列输入AlexNet网络特征提取模块，分别提取出两种帧图的时序特征和空间特征，通过特征分权加强模块，对最后一层卷积层输出的特征图执行加重与动作相关性强的特征权重的操作；将两个AlexNet网络特征提取模块输出的特征图输入LSTM网络行为识别模块，分别对两种图片进行识别，并将两种识别结果通过融合模块按比例融合，得到最终的视频行为识别结果。本发明不仅能实现从视频中识别行为的功能，且能提高识别的准确率。