一种基于渐进式生成对抗网络的视频摘要方法

基本信息

申请号 CN201911301505.0 申请日 -
公开(公告)号 CN111163351A 公开(公告)日 2020-05-15
申请公布号 CN111163351A 申请公布日 2020-05-15
分类号 H04N21/44;H04N21/8549;G06N3/04 分类 电通信技术;
发明人 简维凤;吴振豪;陈钟;李青山;杨可静;兰云飞;吴琛;李洪生;王晓青 申请(专利权)人 博雅信安科技(北京)有限公司
代理机构 沈阳东大知识产权代理有限公司 代理人 博雅信安科技(北京)有限公司;北京国信云服科技有限公司
地址 100037 北京市海淀区翠湖南环路13号院
法律状态 -

摘要

摘要 本发明提供一种基于渐进式生成对抗网络的视频摘要方法,涉及信息处理技术领域。该方法首先按照一定帧率将视频切分成图片的集合,将视频数据转化为图片数据;然后建立渐进式生成对抗网络模型,逐渐增加模型的网络层,从低分辨率训练到高分辨率,提取关键帧;同时,选择精度模式或者收敛模式,以决定模型以何种方式在某一分辨率上停止训练;最终,给出视频所有帧的标签,以标记出视频关键帧所在;利用该标签可提取关键帧,合成摘要短视频。本发明提供的视频摘要方法,采用一种无监督训练方式,不需要对视频做出关键帧的人工标记,同时渐进式的训练,可充分利用局部信息,降低了训练的复杂性,增加了训练结果的稳定性。