(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211024393.0 (22)申请日 2022.08.24 (71)申请人 厦门国际银行股份有限公司 地址 361000 福建省厦门市鹭江道8-10号 国际银行 大厦1-6层 (72)发明人 晏榕　张志远　洪镇宇　 (74)专利代理 机构 厦门仕诚联合知识产权代理 事务所(普通 合伙) 35227 专利代理师 陈蓓蓓 (51)Int.Cl. G06V 10/40(2022.01) G06Q 40/02(2012.01) G06V 10/74(2022.01) G06V 10/774(2022.01) (54)发明名称 针对画面前景人物的图像相似度比对 方法、 装置以及设备 (57)摘要 本发明公开了一种针对画面前景人物的图 像相似度比对 方法、 装置、 设备及存储介质， 其包 括： 获取第一待检测图像以及第二待检测图像， 其中， 所述第一待检测图像以及所述第二待检测 图像包括待识别的目标人物； 将所述第一待检测 图像以及所述第二待检测图像输入预训练完成 的比对模型， 得到前景中目标人物的预测框以及 对应区域的相似度预测值； 其中， 所述比对模型 通过预构建的参数共享孪生网络和预测器以及 基于预设的损失函数进行训练得到。 能够实现端 到端完成目标人物的识别以及相似度比对， 提升 前景人物相似度比对的效率和精度。 权利要求书2页 说明书9页 附图3页 CN 115424027 A 2022.12.02 CN 115424027 A 1.一种针对画面前 景人物的图像相似度比对方法， 其特 征在于， 所述方法包括： 获取第一待检测图像以及第二待检测图像， 其中， 所述第一待检测图像以及所述第二 待检测图像包括待识别的目标 人物； 将所述第一待检测图像以及所述第 二待检测图像输入预训练完成的比对模型， 得到前 景中目标人物的预测框以及对应区域的相似度预测值； 其中， 所述比对模型通过预构建的 参数共享孪生网络和预测器以及基于预设的损失函数进行训练得到 。 2.根据权利要求1所述的一种针对画面前景人物的图像相似度比对方法， 其特征在于， 所述参数共享孪生网络的网络结构包括特征金字塔结构； 通过所述特征金字塔结构对所述 第一待检测图像以及所述第二待检测图像进行多尺度特 征信息的提取以及融合处 理。 3.根据权利要求1所述的一种针对画面前景人物的图像相似度比对方法， 其特征在于， 所述预测器的网络结构包括相似特征子网络和回归子网络； 通过所述相似 特征子网络得到 一对256*A维特征向量， 通过所述回归子网络得到H*W*4A特征图； 其中， A表 示所述相似 特征 子网络或所述回归子网络所输出的特征图中每个像素点对应的候选框数量， H、 W分别表示 所述回归子网络所输出的特 征图的长和宽 。 4.根据权利要求1所述的一种针对画面前景人物的图像相似度比对方法， 其特征在于， 所述损失函数包括第一损失函数以及第二损失函数； 其中， 所述第一损失函数为 满足： 其中， N表示训练样本数量， j表示类别0、 1， 0为负样本、 1为正样本， x表示相似特征子网 络输出的特征向量， γ≥0表示可调节的聚焦 参数， yi表示第i个训练样本的标签， 其取值为 0或1， 第i个训练样本的0、 1类别权重 W0或W1与特征的内积， S表示x的范数， m表示度量的约束 系数； 所述第二损失函数为 其中， x表示回归子网络输出的维度为 (H*W*A， 4)的向量。 5.根据权利要求1所述的一种针对画面前景人物的图像相似度比对方法， 其特征在于， 所述比对 模型的训练过程， 包括： 构造训练样本， 所述训练样本包括第 一样本以及第 二样本， 其中， 所述第 一样本中包括 目标人物且目标人物相似度高的一对图像， 所述第二样本中包括目标人物且目标人物相似权　利　要　求　书 1/2 页 2 CN 115424027 A 2度低的一对图像。 6.根据权利要求5所述的一种针对画面前景人物的图像相似度比对方法， 其特征在于， 所述第一样本以及所述第二样本中还 包括干扰前 景区域的非目标 人物。 7.一种针对画面前 景人物的图像相似度比对 装置， 其特 征在于， 所述装置包括： 获取单元， 用于获取第一待检测图像以及第二待检测图像， 其中， 所述第 一待检测图像 以及所述第二待检测图像包括待识别的目标 人物； 比对单元， 用于将所述第 一待检测图像以及所述第 二待检测图像输入预训练完成的比 对模型， 得到前景中目标人物的预测框以及 对应区域的相似度预测值； 其中， 所述比对模型 通过预构建的参数共享孪生网络和预测器以及基于预设的损失函数进行训练得到 。 8.一种设备， 其特征在于， 包括处理器、 存储器以及存储在所述存储器内的计算机程 序， 所述计算机程序被所述处理器执行以实现如权利要求 1至6任意一项 所述的一种针对画 面前景人物的图像相似度比对方法的步骤。 9.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有计算机 程序， 所述计算机程序被处理器执行以实现如权利要求 1至6任意一项 所述的一种针对画 面 前景人物的图像相似度比对方法的步骤。权　利　要　求　书 2/2 页 3 CN 115424027 A 3