(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211065565.9 (22)申请日 2022.09.01 (71)申请人 太平金融科技 服务 （上海） 有限公司 深圳分公司 地址 518048 广东省深圳市福田区新洲路 立交桥西北侧新洲广场华丰大厦第3 层B1-A (72)发明人 任伟　 (74)专利代理 机构 华进联合专利商标代理有限 公司 44224 专利代理师 周旋 (51)Int.Cl. G06F 16/583(2019.01) G06N 3/04(2006.01) G06N 3/08(2006.01)G06V 10/74(2022.01) G06V 10/762(2022.01) G06V 10/82(2022.01) (54)发明名称 图像检索方法、 装置、 计算机设备、 存储介质 和程序产品 (57)摘要 本申请涉及一种图像检索方法、 装置、 计算 机设备、 存储介质和程序产品。 该方法包括： 接收 终端响应于用户的触发操作发送的图像检索请 求； 其中， 图像检索请求用于从图像数据库中获 取目标图像， 该图像检索请求包括图像场景信息 以及图像查询参数， 图像查询参数包括查询标签 和/或参照图像， 该参照图像为用于与目标图像 进行相似度对比的图像； 根据图像场景信息查询 图像数据库， 获取第一图像查询结果； 其中， 第一 图像查询结果包括与图像场景信息对应的第一 候选图像， 图像数据库包括按照不同场景进行存 储的多张图像； 根据图像查询参数以及第一图像 查询结果， 确定目标图像； 能够提高检索到的图 像的匹配度。 权利要求书3页 说明书16页 附图5页 CN 115146103 A 2022.10.04 CN 115146103 A 1.一种图像 检索方法， 其特 征在于， 所述方法包括： 接收终端响应于用户的触发操作发送的图像检索请求； 其中， 所述图像检索请求用于 从图像数据库中获取目标图像， 所述图像检索请求包括图像场景信息以及图像查询参数， 所述图像查询参数包括查询标签和/或参照图像， 所述参照图像为用于与所述目标图像进 行相似度对比的图像； 根据所述图像场景信 息查询所述图像数据库， 获取第 一图像查询结果； 其中， 所述第一 图像查询结果包括与所述图像场景信息对应的第一候选图像， 所述图像数据库包括按照不 同场景进行存 储的多张图像； 根据所述图像查询参数以及所述第一图像查询结果， 确定目标图像。 2.根据权利要求1所述的方法， 其特征在于， 所述图像查询参数为所述查询标签， 所述 图像数据库还包括每张图像的图像标签以及每张图像隶属于所述图像标签的概率， 所述第 一图像查询结果还包括所述第一候选图像的图像标签和所述第一候选图像属于所述图像 标签的概 率； 相应的， 所述根据所述图像查询参数以及所述第一图像查询结果， 确定目标图像， 包 括： 根据所述查询标签， 从所述第 一图像查询结果中确定图像标签与所述查询标签相同的 第二候选图像； 根据所述第二 候选图像隶属于所述 查询标签的概 率， 确定所述目标图像。 3.根据权利要求2所述的方法， 其特 征在于， 将隶属于所述查询标签的概率大于预设概率阈值的第 二候选图像， 确定为所述目标图 像。 4.根据权利要求2所述的方法， 其特 征在于， 所述方法还 包括： 将图像集合中的每张图像输入至预设的标签识别网络进行标签识别处理， 得到识别结 果， 所述识别结果包括每张图像的图像标签以及所述图像属于所述图像标签的概 率； 将所述图像集 合以及所述识别结果存 储至所述图像数据库。 5.根据权利要求1所述的方法， 其特征在于， 所述图像查询参数为所述参照图像， 所述 图像数据库还包括每张图像的特征向量， 所述第一图像查询结果还包括所述第一候选图像 的特征向量； 相应的， 所述 根据所述图像查询参数以及第一图像查询结果， 确定目标图像， 包括： 获取所述参照图像的特 征向量； 根据所述参照图像的特征向量与 所述第一候选图像的特征向量之间的距离， 从所述第 一候选图像中确定所述目标图像。 6.根据权利要求5所述的方法， 其特征在于， 所述根据所述参照图像的特征向量与 所述 第一候选图像的特 征向量之间的距离， 从所述第一 候选图像中确定所述目标图像， 包括： 将与所述参照图像的特征向量的距离小于预设距离阈值的第 一候选图像， 确定为所述 目标图像。 7.根据权利要求1所述的方法， 其特征在于， 所述图像查询参数包括所述查询标签以及 所述参照图像， 所述图像数据库还包括每张图像的特征向量、 每张图像的图像标签以及每 张图像隶属于所述图像标签的概率， 所述第一图像查询结果还包括所述第一候选图像的特权　利　要　求　书 1/3 页 2 CN 115146103 A 2征向量、 所述第一 候选图像的图像标签和所述第一 候选图像属于所述图像标签的概 率； 相应的， 所述 根据所述图像查询参数以及第一图像查询结果， 确定目标图像， 包括： 根据所述查询标签， 从所述第 一图像查询结果中确定图像标签与所述查询标签相同的 第二候选图像； 将所述第二候选图像中隶属于所述查询标签的概率大于预设概率阈值的第二候选图 像确定为第三 候选图像； 获取所述参照图像的特 征向量； 根据所述参照图像的特征向量与 所述第三候选图像的特征向量之间的距离， 从所述第 三候选图像中确定所述目标图像。 8.根据权利要求1所述的方法， 其特征在于， 所述图像查询参数包括所述查询标签以及 所述参照图像， 所述图像数据库还包括每张图像的特征向量、 每张图像的图像标签以及每 张图像隶属于所述图像标签的概率， 所述第一图像查询结果还包括所述第一候选图像的特 征向量、 所述第一 候选图像的图像标签和所述第一 候选图像属于所述图像标签的概 率； 相应的， 所述 根据所述图像查询参数以及第一图像查询结果， 确定目标图像， 包括： 获取所述参照图像的特 征向量； 根据所述参照图像的特征向量， 将所述第 一图像查询结果中与 所述参照图像的特征向 量之间的距离小于预设距离阈值的第一 候选图像确定为第二 候选图像； 根据所述 查询标签， 将与所述 查询标签相同的第二 候选图像确定为第三 候选图像； 将所述第三候选图像中隶属于所述查询标签的概率大于预设概率阈值的第三候选图 像确定为所述目标图像。 9.根据权利要求5所述的方法， 其特 征在于， 所述方法还 包括： 将图像集合中的每张图像输入至预设的特征提取网络进行特征提取， 得到特征提取结 果， 所述特征提取结果包括每张图像的特征向量； 其中， 所述特征提取网络包括至少两个不 同的特征提取子网络， 每个特征提取子网络的最后一层 池化层输出的特征矩阵共同输入至 公共全连接层进行全连接处 理； 将所述图像集 合以及所述特 征提取结果存储至所述图像数据库。 10.根据权利 要求9所述的方法， 其特征在于， 所述特征提取子网络为ResNet152骨干 网 络、 ResNet 200骨干网络、 SEResNet152骨干网络和I nceptionV4骨干网络中的任一个。 11.一种图像 检索装置， 其特 征在于， 所述装置包括： 第一获取模块， 用于接收终端响应于用户的触发操作发送的图像检索请求； 其中， 所述 图像检索请求用于从图像数据库中获取目标图像， 所述图像检索请求包括图像场景信息以 及图像查询参数， 所述图像查询参数包括查询标签和/或参照图像， 所述参照图像为用于与 所述目标图像进行相似度对比的图像； 第二获取模块， 用于根据所述图像场景信息查询所述图像数据库， 获取第一图像查询 结果； 其中， 所述第一图像查询结果包括与所述图像场景信息对应的第一候选图像， 所述图 像数据库包括按照不同场景进行存 储的多张图像； 确定模块， 用于根据所述图像查询参数以及所述第一图像查询结果， 确定目标图像。 12.一种计算机设备， 包括存储器和 处理器， 所述存储器存储有计算机程序， 其特征在 于， 所述处 理器执行所述计算机程序时实现权利要求1至10中任一项所述的方法的步骤。权　利　要　求　书 2/3 页 3 CN 115146103 A 3