一种确定操作界面帧的唯一性标识的方法及装置

基本信息

申请号 CN201811246513.5 申请日 -
公开(公告)号 CN109445893A 公开(公告)日 2019-03-08
申请公布号 CN109445893A 申请公布日 2019-03-08
分类号 G06F9/451(2018.01)I; G06T7/70(2017.01)I 分类 计算;推算;计数;
发明人 李东播 申请(专利权)人 北京赢销通软件技术有限公司
代理机构 北京弘权知识产权代理事务所(普通合伙) 代理人 北京赢销通软件技术有限公司
地址 100192 北京市海淀区西小口路66号中关村东升科技园B-1号楼三层305室
法律状态 -

摘要

摘要 本申请公开一种确定操作界面帧唯一性标识的方法及装置,首先,获取待处理操作界面帧和与待处理操作界面帧关联的人机交互事件在待处理操作界面帧的交互位置信息;然后,根据交互位置信息在待处理操作界面帧内选择一块或通过位置布局关联的多块区域;最后,通过像素比对的方法,确定相对于操作界面帧具有唯一性的一块或通过位置布局关联的多块区域对应的图像为该操作界面帧的唯一性标识。通过确定操作界面帧的唯一性标识,使得后续执行包含该唯一性标识的人机交互操作的脚本时,可以利用脚本中预先记录的唯一性标识与交互位置的相对位置关系,确定执行界面上的目标交互位置,从而在该目标交互位置处模拟用户操作自动执行相应的交互动作。