基于多模态深度学习技术的儿童ADHD筛查评估系统

基本信息

申请号 CN202010401503.5 申请日 -
公开(公告)号 CN111528859A 公开(公告)日 2020-08-14
申请公布号 CN111528859A 申请公布日 2020-08-14
分类号 A61B5/11(2006.01)I 分类 -
发明人 张雁翼;浦世亮;朱强;孔鸣;洪文琛;赵天琦 申请(专利权)人 浙江大学人工智能研究所德清研究院
代理机构 杭州斯可睿专利事务所有限公司 代理人 王利强
地址 313200浙江省湖州市德清县乾元镇智能生态城小镇客厅(德清高铁站旁)
法律状态 -

摘要

摘要 一种基于多模态深度学习技术的儿童ADHD筛查评估系统,包括:量表测试模块,用于通过ADHD诊断心理学量表采集和评估就诊儿童;软硬件协同模块,用于开发测试软件让就诊儿童完成任务,硬件模组用于记录任务测试过程中的眼动注意力、表情和身体姿态三方面信息;智能分析模块,用于运用计算机视觉技术进行眼动注意力、表情、姿态的分析,还对测试者的鼠标移动、点击和键盘输入动作也做了记录和跟踪,与同质化向量融合;多模态信息融合模型,采用时序多模态信息融合模型BERT,对某个特定时间片段中获取的同质化向量结合测试结果进行预训练,最终生成的模型判断患者在本时间段是否存在异常行为的分类结果。本发明效率较高、准确性较好。