半监督视频目标分割方法及装置

基本信息

申请号 CN202110838594.3 申请日 -
公开(公告)号 CN113436199B 公开(公告)日 2022-02-22
申请公布号 CN113436199B 申请公布日 2022-02-22
分类号 G06T7/10(2017.01)I;G06V10/46(2022.01)I;G06V10/774(2022.01)I;G06K9/62(2022.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I;CN 111210446 A,2020.05.29;CN 111161306 A,2020.05.15;US 2021150728 A1,2021.05.20;US 2019311202 A1,2019.10.10 Fanchao Lin etal..Query-Memory Re-Aggregation forWeakly-supervised Video Object Segmentation.《The Thirty-Fifth AAAI Conference on Artificial Intelligence (AAAI-21)》.2021,第35卷(第03期),;Fanchao Lin etal..Query-Memory Re-Aggregation forWeakly-supervised Video Object Segmentation.《The Thirty-Fifth AAAI Conference on Artificial Intelligence (AAAI-21)》.2021,第35卷(第3期),;Ziqin Wang etal..RANet: Ranking Attention Network for Fast Video Object Segmentation.《2019 IEEE/CVF International Conference on Computer Vision (ICCV)》.2020,;陈加等.深度学习在视频对象分割中的应用与展望.《计算机学报》.2021,第44卷(第3期), 分类 计算;推算;计数;
发明人 靳国庆;杨松;郭俊波;石里男;林凡超;谢洪涛;张勇东 申请(专利权)人 人民网股份有限公司
代理机构 北京市浩天知识产权代理事务所(普通合伙) 代理人 陈翠
地址 100026北京市西城区新街口外大街28号B座234号
法律状态 -

摘要

摘要 本发明公开了一种半监督视频目标分割方法及装置,该方法包括:获取待分割视频的模板帧图像、模板帧图像分割标签及待查询帧图像;将模板帧图像及模板帧图像分割标签输入至第一编码器提取特征,得到复合特征;将待查询帧图像输入至第二编码器提取特征,得到图像特征;将复合特征及图像特征输入至预先训练的时序推断模块进行分割结果预测,得到待查询帧图像对应的预测分割结果。本发明提供的方案,基于预测分割结果的循环一致性进行半监督训练,在仅需要一段视频中第一帧图像及第一帧图像分割标签的前提下,能高效地进行训练,基于此所进行的视频目标分割仍然具有较高的预测精度,从而无需人工一一进行标注,节省了时间成本,同时提高了分割效率。