(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211055878.6 (22)申请日 2022.08.30 (71)申请人 兴业银行股份有限公司 地址 350014 福建省福州市台江区江滨中 大道398号兴业银行 大厦 申请人 兴业数字金融服 务(上海)股份有限 公司 (72)发明人 周锐　 (74)专利代理 机构 上海段和段律师事务所 31334 专利代理师 郭国中 (51)Int.Cl. G06V 10/74(2022.01) G06V 10/82(2022.01) G06N 3/08(2006.01)G06N 3/04(2006.01) (54)发明名称 图像检测与匹配的方法及系统 (57)摘要 本发明提供了一种图像检测与匹配的方法 及系统， 包括如下步骤： 获取待识别图像的信息 数据； 获取到待识别图像中的目标区域和待识别 区域； 获取到目标区域和待识别区域中所有子图 标的中心坐标以及长和宽； 将目标区域中所有子 图标存储到目标区域子图标文件夹中， 将待识别 区域中所有子图标存储到待识别区域子图标文 件夹中； 将目标区域子图标与待识别区域子图标 进行匹配； 对目标区域子图标的中心坐标进行排 序， 对待识别 区域子图标的中心坐标进行排序， 获取到待识别区域子图标的中心坐标的顺序； 依 次识别待识别区域的子图标， 完成图像的智能检 测与匹配的功能。 本发明能够自动完成对图像中 目标区域和待识别区域中所有子图标的检测与 匹配。 权利要求书2页 说明书7页 附图1页 CN 115272724 A 2022.11.01 CN 115272724 A 1.一种图像 检测与匹配的方法， 其特 征在于， 包括如下步骤： 步骤1： 获取待识别图像的信息数据； 步骤2： 调用图像预处理程序， 对步骤1中获取到的待识别图像进行预处理， 获取到待识 别图像中的目标区域和待识别区域； 步骤3： 调用图像目标检测程序， 获取到目标区域和待识别区域中所有子图标的中心坐 标以及长和宽； 调用子图标存储程序， 根据中心 坐标以及长和宽， 将目标区域中所有子图标 存储到目标区域子图标文件夹中， 将待识别区域中所有子图标存储到待识别区域子图标文 件夹中； 步骤4： 调用图像匹配程序， 通过图像匹配程序读入步骤3中得到的存储在目标区域子 图标文件夹中的子图标和存储在待识别区域子图标文件夹中的子图标， 将目标区域子图标 与待识别区域子图标进行匹配， 记录下待识别区域子图标与目标区域子图标的匹配关系； 步骤5： 调用待识别区域子图标顺序获取程序， 对步骤3中所获得的目标区域子 图标的 中心坐标进行排序， 再根据步骤4中获取到的目标区域子图标与待识别区域子图标 的匹配 关系， 对步骤3中得到的待识别区域子图标的中心 坐标进行排序， 获取到与目标区域子图标 相对应的待识别区域子图标的中心坐标的顺序； 步骤6： 根据步骤5 中获取到的待识别区域子图标的中心坐标的顺序， 依次识别步骤2中 待识别区域的子图标， 完成图像的智能检测与匹配的功能。 2.根据权利要求1所述的图像 检测与匹配的方法， 其特 征在于， 所述 步骤3具体为： 步骤3.1： 调用图像目标检测程序， 通过图像目标检测程序读入步骤2中获取到的目标 区域并进行目标检测， 获取到目标区域中所有子图标的中心坐标以及长和宽； 步骤3.2： 调用子图标存储程序， 根据步骤3中获取到的目标区域子图标的中心坐标以 及长和宽， 将目标区域中所有子图标依次以图片的形式存 储到目标区域子图标文件夹中； 步骤3.3： 调用图像目标检测程序， 通过图像目标检测程序读入步骤2中获取到的待识 别区域并进行目标检测， 获取到待识别区域中所有子图标的中心坐标以及长和宽； 步骤3.4： 调用子图标存储程序， 根据步骤5中所获取到的待识别区域子图标的中心坐 标及长和宽， 将待识别区域中所有子图标依次以图片的形式存储到待识别区域子图标文件 夹中。 3.根据权利要求1所述的图像检测与匹配的方法， 其特征在于， 所述步骤3 中， 所述图像 目标检测程序中通过第4版本的YOLO人工神经网络实现目标检测功能。 4.根据权利要求1所述的图像检测与匹配的方法， 其特征在于， 所述步骤4中， 所述图像 匹配程序中通过孪生神经网络计算两张图像的相似度， 实现两张图像的匹配。 5.根据权利要求 4所述的图像 检测与匹配的方法， 其特 征在于， 所述 步骤4具体为： 对于每一个目标区域子图标， 利用孪生神经网络计算所有待识别区域子图标与该目标 区域子图标的相似度， 将最大相似度所对应的待识别区域子图标作为与该目标区域子图标 所匹配的待识别区域子图标， 记录下待识别区域子图标与目标区域子图标的匹配关系。 6.根据权利要求1所述的图像 检测与匹配的方法， 其特 征在于， 所述 步骤5具体为： 调用待识别区域子 图标顺序获取程序， 对步骤3中所获得的目标区域子 图标的中心坐 标， 按照横坐标从小到大 的顺序对中心坐标进行排序， 获取到目标区域子图标在图像中从 左到右的顺序， 再根据步骤4中获取到的目标区域子图标与待识别区域子图标的匹配关系，权　利　要　求　书 1/2 页 2 CN 115272724 A 2对步骤3中得到的待识别区域子图标的中心坐标进行排序， 获取到与目标区域子图标从左 到右相对应的待识别区域子图标的中心坐标的顺序。 7.根据权利要求1所述的图像 检测与匹配的方法， 其特 征在于， 所述 步骤1具体为： 步骤1.1： 显示待识别图像； 步骤1.2： 对所述待识别图像进行截图； 步骤1.3： 将步骤1.2中所截取到的待识别图像保存到指定文件夹中。 8.根据权利要求7所述的图像检测与匹配的方法， 其特征在于， 步骤1.1具体为： 启动流 程机器人， 初始化参数， 通过流程机器人打开浏览器， 访问指定的网页， 通过流程机器人在 打开的网页中点击待识别图像的链接， 使 待识别图像在 浏览器中显示出来； 步骤1.2具体为： 通过流 程机器人对在 浏览器里显示的待识别图像进行截图； 步骤1.3具体为： 通过流程机器人将步骤1.2截取到的待识别图像保存到本地电脑的指 定文件夹中。 9.根据权利要求8所述的图像检测与匹配的方法， 其特征在于， 所述步骤2中， 通过流程 机器人调用图像预处 理程序； 所述步骤3中， 通过流 程机器人调用图像目标检测程序和子图标存 储程序； 所述步骤4中， 通过流 程机器人调用图像匹配程序； 所述步骤5中， 通过流 程机器人调用待识别区域子图标顺序获取程序； 所述步骤6 中， 通过流程机器人依次点击待识别图像 中待识别区域的子图标， 完成图像 的智能检测与匹配的功能。 10.一种图像 检测与匹配的系统， 其特 征在于， 包括如下模块： 模块M1： 获取待识别图像的信息数据； 模块M2： 调用图像预处理程序， 对模块M1中获取到的待识别图像进行预处理， 获取到待 识别图像中的目标区域和待识别区域； 模块M3： 调用图像目标检测程序， 获取到目标区域和待识别区域中所有子图标的中心 坐标以及长和宽； 调用子图标存储程序， 根据中心 坐标以及长和宽， 将目标区域中所有子图 标存储到目标区域子图标文件夹中， 将待识别区域中所有子图标存储到待识别区域子图标 文件夹中； 模块M4： 调用图像匹配程序， 通过图像匹配程序读入模块M3中得到的存储在目标区域 子图标文件夹中的子图标和存储在待识别区域子图标文件夹中的子图标， 将目标区域子图 标与待识别区域子图标进行匹配， 记录下待识别区域子图标与目标区域子图标的匹配关 系； 模块M5： 调用待识别区域子图标顺序获取程序， 对模块M3中所获得的目标区域子图标 的中心坐标进行排序， 再根据模块M4中获取到的目标区域子图标与待识别区域子图标的匹 配关系， 对模块M3中得到的待识别区域子图标的中心坐标进行排序， 获取到与目标区域子 图标相对应的待识别区域子图标的中心坐标的顺序； 模块M6： 根据模块M5中获取到的待识别区域子图标的中心坐标的顺序， 依次识别步骤2 中待识别区域的子图标， 完成图像的智能检测与匹配的功能。权　利　要　求　书 2/2 页 3 CN 115272724 A 3