一种用于智能面试的表达能力维度评价方法及装置

基本信息

申请号 CN202011595060.4 申请日 -
公开(公告)号 CN112818742A 公开(公告)日 2021-05-18
申请公布号 CN112818742A 申请公布日 2021-05-18
分类号 G06K9/00;G06K9/62;G06N3/04;G06N3/08;G06Q10/06 分类 计算;推算;计数;
发明人 田鑫 申请(专利权)人 南京智能情资创新科技研究院有限公司
代理机构 南京天翼专利代理有限责任公司 代理人 奚铭
地址 210046 江苏省南京市栖霞区仙林街道仙林大学城元化路8号1幢635室
法律状态 -

摘要

摘要 一种用于智能面试的表达能力维度评价方法及装置,采集面试视频,抽取视频帧和音频数据,首先将视频帧输入基于CNN的手部检测模型得到底层手部姿态特征,将音频数据输入基于自然语言处理的音频处理模块,得到底层语音表达特征;将两种底层特征分别输入两个LSTM编码为时序特征;再通过先验知识规则从两种底层特征中提取抽象的高层语义特征,包括手部表达、表达流畅度、感染力、条理性和简洁度信息;将时序特征和高层语义特征标准化后输入全连接神经网络,预测表达能力等级。系统使用分布式函数计算服务搭建,形成表达能力评价系统。本发明解决面试中表达能力打分的主观偏差和时间成本的效率问题,实现对大量面试视频快速并准确的表达能力评估。