(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210708572.X (22)申请日 2022.06.22 (71)申请人 中国平安财产保险股份有限公司 地址 518000 广东省深圳市福田区益田路 5033号平安金融中心12、 13、 38、 39、 40 层 (72)发明人 倪亚冬　 (74)专利代理 机构 深圳国新 南方知识产权代理 有限公司 4 4374 专利代理师 陈冰 (51)Int.Cl. G06F 11/36(2006.01) G06V 10/74(2022.01) G06F 9/451(2018.01) (54)发明名称 基于图像识别的自动化测试方法、 装置、 计 算机设备及存 储介质 (57)摘要 本发明公开了一种基于图像识别的自动化 测试方法、 装置、 计算机设备及存储介质。 所述方 法包括： 在执行测试用例的测试过程中， 获取测 试页面的测试操作页面截图； 采用基于像素级别 的图像对比算法对所述测试操作页面截图与对 应的标准测试页面截图进行对比， 并计算所述测 试操作页面截图与标准测试页面截图之间的相 似度； 当所述测试操作页面截图与标准测试页面 截图之间的相似度低于设定的相似度阈值时， 判 定所述测试用例测试失败， 并对对应的测试操作 页面截图进行错误标记。 本申请无需花费大量的 人力去更新维护自动化脚本即可完成自动化测 试， 且测试覆盖度高， 大大降低了自动化测试脚 本维护的成本 。 权利要求书2页 说明书9页 附图5页 CN 115033487 A 2022.09.09 CN 115033487 A 1.一种基于图像识别的自动化测试 方法， 其特 征在于， 包括： 在执行测试用例的测试 过程中， 获取测试页面的测试操作页面截图； 采用基于像素级别的图像对比算法对所述测试操作页面截图与对应的标准测试页面 截图进行对比， 并计算所述测试操作页面截图与所述标准测试页面截图之间的相似度； 当所述测试操作页面截图与所述标准测试页面截 图之间的相似度低于设定的相似度 阈值时， 判定所述测试用例测试失败， 并对 对应的测试操作页面截图进行错 误标记。 2.根据权利要求1所述的基于图像识别的自动 化测试方法， 其特征在于， 所述获取测试 页面的测试操作页面截图还 包括： 获取所述测试用例的标准测试页面截图， 并将所述标准测试页面截图存入指定的路径 文件中。 3.根据权利要求2所述的基于图像识别的自动 化测试方法， 其特征在于， 所述采用基于 像素级别的图像对比算法对所述测试操作页面截图与对应的标准测试页面截图进行对比 具体为： 从所述路径文件中读取测试用例对应的标准测试页面截图， 并对所述标准测试页面截 图以及所述测试操作页面截图进 行降维处理， 生成所述标准测试页面截图对应的第一二值 化图片以及所述测试操作页面截图对应的第二 二值化图片； 采用基于像素级别的图像对比算法对所述第一二值化图片以及所述第二二值化图片 进行对比。 4.根据权利要求3所述的基于图像识别的自动 化测试方法， 其特征在于， 所述对所述标 准测试页面截图以及所述测试操作页面截图进行降维处 理具体为： 采用OTSU算法将所述标准测试页面截图以及所述测试操作页面截图二值化为黑色和 白色， 并用1表 示黑色， 用0表示白色， 生 成由数字0和1组成的第一二值化图片和第二二值化 图片。 5.根据权利要求4所述的基于图像识别的自动 化测试方法， 其特征在于， 所述计算所述 测试操作页面截图与对应的标准测试页面截图的相似度具体为： 对所述第一二值化图片以及所述第 二二值化图片进行相似度匹配， 得到所述第 一二值 化图片以及所述第二 二值化图片的相似度向量； 分别找到所述第 一二值化图片和所述第 二二值化图片的中心点， 并计算所述第 一二值 化图片以及所述第二二值化图片的相似度向量与各自中心点之 间的距离， 根据所述距离计 算第一二值化图片和所述第二 二值化图片的相似度。 6.根据权利要求3至5任一项所述的基于 图像识别的自动化测试方法， 其特征在于， 所 述采用基于像素级别的图像对比算法对所述测试操作页面截图与对应的标准测试页面截 图进行对比还 包括： 按照设定大小分别对所述第 一二值化图片和所述第 二二值化图片进行分块， 生成第 一 子块和第二子块， 所述第一子块为所述第一二值化图片分块后生成的图片， 所述第二子块 为对所述第二二值化图片分块后生成的图片， 所述第一子块和第二子块的大小及数量相 同； 采用基于像素级别的图像对比算法对所述第 一子块和所述第 二子块进行对比， 并计算 每个第二子块与对应位置的第一子块的相似度。权　利　要　求　书 1/2 页 2 CN 115033487 A 27.根据权利要求6所述的基于图像识别的自动 化测试方法， 其特征在于， 所述计算所述 测试操作页面截图与对应的标准测试页面截图的相似度还 包括： 判断所述第 二子块与对应位置的第 一子块的相似度 是否低于设定的相似度阈值， 如果 低于相似度阈值， 判定所述测试用例测试失败， 在所述第二子块在测试操作页面截图中的 对应区域进行错 误标记。 8.一种基于图像识别的自动化测试装置， 其特 征在于， 包括： 页面截图模块： 用于在执行测试用例的测试过程中， 获取测试页面的测试操作页面截 图； 页面相似度计算模块： 用于采用基于像素级别的图像对比算法对所述测试操作页面截 图与对应的标准测试页面截图进 行对比， 并计算所述测试操作页面截图与所述标准测试页 面截图之 间的相似度， 当所述测试操作页面截图与所述标准测试页面截图之间的相似度低 于设定的相似度阈值时， 判定所述测试用例测试失败， 并对对应的测试操作页面截图进行 错误标记。 9.一种计算机设备， 其特 征在于， 所述计算机设备包括： 存储有可执行程序代码的存 储器； 与所述存 储器连接的处 理器； 所述处理器调用所述存储器中存储的所述可执行程序代码， 执行如权利要求1 ‑7任一 项所述的基于图像识别的自动化测试 方法。 10.一种存储介质， 其特征在于， 存储有处理器可运行的程序指令， 所述程序指令用于 执行权利要求1至7任一项所述的基于图像识别的自动化测试 方法。权　利　要　求　书 2/2 页 3 CN 115033487 A 3