一种RPA机器人中图标检测方法及其系统
基本信息
| 申请号 | CN202111023897.6 | 申请日 | - |
| 公开（公告）号 | CN113469294A | 公开（公告）日 | 2021-10-01 |
| 申请公布号 | CN113469294A | 申请公布日 | 2021-10-01 |
| 分类号 | G06K9/62（2006.01）I;G06N3/08（2006.01）I;G06F3/0481（2013.01）I | 分类 | 计算；推算；计数; |
| 发明人 | 王凯;欧阳小刚 | 申请（专利权）人 | 杭州实在智能科技有限公司 |
| 代理机构 | 杭州云睿专利代理事务所（普通合伙） | 代理人 | 张骁敏 |
| 地址 | 310000浙江省杭州市余杭区余杭街道文一西路1818-2号6-405室 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明公开了一种RPA机器人中图标检测方法及其系统，获取标注好的页面图片中的按钮图标、并擦除按钮图标生成软件背景图，将获取到的按钮图标随机贴到软件背景图上以生成新的页面图片和标注文件；将原始标注好的训练数据和新生成的生成数据，分割成多张用于训练的固定大小的小图，并自动生成相应的标注文件，构成最终新的训练数据；根据新的训练数据对深度神经网络训练，获得按钮检测模型；输入需检测的页面图片，按照设置的固定切分尺寸和重叠量切分成多个切块图像，经过按钮检测模型检测输出每个切块图像上按钮图标的位置信息，再通过合并重新生成相对于输入的页面图片的位置信息，得到最终的按钮位置信息。 |
