识别课堂教学视频中行为的方法及装置专利查询专利号|摘要-满商公司网

识别课堂教学视频中行为的方法及装置

基本信息

申请号	CN202111238561.1	申请日	-
公开（公告）号	CN114067391A	公开（公告）日	2022-02-18
申请公布号	CN114067391A	申请公布日	2022-02-18
分类号	G06V40/16（2022.01）I;G06V40/20（2022.01）I;G06V20/40（2022.01）I;G06Q50/20（2012.01）I	分类	计算；推算；计数;
发明人	赵悦汐;程红兵;鞠剑伟;昝晨辉	申请（专利权）人	北京金茂教育科技有限公司
代理机构	北京中索知识产权代理有限公司	代理人	胡大成
地址	100000北京市丰台区汽车博物馆东路8号院3号楼15层1503
法律状态	-

摘要

本申请公开一种识别课堂教学视频中行为的方法及装置，用以解决现有独立的AI技术无法直接生成与教学场景相匹配的数据的问题。其中，一种识别课堂教学视频中行为的方法，包括：调用多媒体AI数据接口处理输入的待识别多媒体视频，得到分别按视频时间记录的视频人脸数据和语音转文字数据；匹配视频人脸数据与预设的基础人脸数据，得到标记出镜时间的人物身份信息；匹配语音转文字数据的视频时间与人物身份信息的出镜时间，得到语音转文字数据中的发言人身份信息；确定语音转文字数据中的文字内容表征的行为类别；根据发言人身份信息和行为类别，得到行为统计结果。通过有效关联视频中的人脸信息与语音数据信息，生成与教学场景相匹配的行为统计数据。