基于多模态深度学习技术的儿童ADHD筛查评估系统
基本信息
申请号 | CN202010401503.5 | 申请日 | - |
公开(公告)号 | CN111528859A | 公开(公告)日 | 2020-08-14 |
申请公布号 | CN111528859A | 申请公布日 | 2020-08-14 |
分类号 | A61B5/11(2006.01)I | 分类 | - |
发明人 | 张雁翼;浦世亮;朱强;孔鸣;洪文琛;赵天琦 | 申请(专利权)人 | 浙江大学人工智能研究所德清研究院 |
代理机构 | 杭州斯可睿专利事务所有限公司 | 代理人 | 王利强 |
地址 | 313200浙江省湖州市德清县乾元镇智能生态城小镇客厅(德清高铁站旁) | ||
法律状态 | - |
摘要
摘要 | 一种基于多模态深度学习技术的儿童ADHD筛查评估系统,包括:量表测试模块,用于通过ADHD诊断心理学量表采集和评估就诊儿童;软硬件协同模块,用于开发测试软件让就诊儿童完成任务,硬件模组用于记录任务测试过程中的眼动注意力、表情和身体姿态三方面信息;智能分析模块,用于运用计算机视觉技术进行眼动注意力、表情、姿态的分析,还对测试者的鼠标移动、点击和键盘输入动作也做了记录和跟踪,与同质化向量融合;多模态信息融合模型,采用时序多模态信息融合模型BERT,对某个特定时间片段中获取的同质化向量结合测试结果进行预训练,最终生成的模型判断患者在本时间段是否存在异常行为的分类结果。本发明效率较高、准确性较好。 |
