(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202211014889.X (22)申请日 2022.08.23 (65)同一申请的已公布的文献号 申请公布号 CN 115100442 A (43)申请公布日 2022.09.23 (73)专利权人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 刘忠耿　唐邦杰　潘华东　 (74)专利代理 机构 深圳市威世博知识产权代理 事务所(普通 合伙) 44280 专利代理师 何倚雯 (51)Int.Cl. G06V 10/74(2022.01) G06V 20/64(2022.01) G06V 40/20(2022.01) (56)对比文件 CN 113850221 A,2021.12.28 CN 111161320 A,2020.0 5.15 CN 114550027 A,202 2.05.27CN 112084867 A,2020.12.15 CN 114120188 A,2022.03.01 WO 2022021217 A1,202 2.02.03 US 202108214 4 A1,2021.0 3.18 刘忠耿.基 于核相关滤波器的目标追 踪算法 研究. 《中国优秀硕士学位 论文全文数据库》 .2019, 曾德宁.基 于深度学习的遥感视频目标检测 与多目标跟踪. 《中国优秀硕士学位 论文全文数 据库》 .202 2, Chunluan Zhou et al.Temporal K eypoint Matching and Refi nement Netw ork for Pose Estimati on and Track ing. 《Temporal Keypoint Matching and Refi nement Network》 .2020, Bin Xiao et al.Simple Basel ines for Human Pose Estimati on and Track ing. 《ECCV2018》 .2018, Alex Bew ley et al.SIMPLE ON LINE AND REALTIME TRACKI NG. 《arXiv》 .2019, 审查员 崔芳婷 (54)发明名称 目标匹配方法、 目标与部位匹配方法及相关 设备 (57)摘要 本申请公开了一种目标匹配方法、 目标与部 位匹配方法、 电子设备及计算机可读存储介质。 该目标匹配方法包括： 获取待处理视频的当前帧 中各第一目标的当前检测关键点， 第一目标的当 前检测关键点是对第一目标进行关键点检测得 到的； 基于待处理视频的参考帧中各第二目标的 参考关键点进行估计， 得到当前帧中各第二目标 的当前估计关键点， 第二目标的参考关键点为第 二目标的参考估计 关键点或参考检测关键点； 基 于各第二目标的当前估计关键点 以及各第一目 标的当前检测关键点两两 之间的相似度， 对各第 一目标与各第二目标进行匹配。 通过上述方式，能够提高目标匹配的可操作性和准确性。 权利要求书2页 说明书8页 附图5页 CN 115100442 B 2022.11.22 CN 115100442 B 1.一种目标匹配方法， 其特 征在于， 包括： 获取待处理视频的当前帧中各第 一目标的当前检测关键点， 所述第 一目标的当前检测 关键点是对所述第一目标进行关键点检测得到的； 基于所述待处理视频的参考帧中各第 二目标的参考关键点进行估计， 得到所述当前帧 中所述各第二目标的当前估计关键点， 所述第二目标的参考关键点为所述第二目标的参考 估计关键点或参 考检测关键点； 基于所述各第二目标的当前估计关键点以及所述各第一目标的当前检测关键点两两 之间的相似度， 对所述各第一目标与所述各第二目标进行匹配； 其中， 所述基于所述各第 二目标的当前估计关键点以及所述各第 一目标的当前检测关 键点两两之间的相似度， 对所述各第一目标与所述各第二目标进行匹配， 包括： 基于所述各第 一目标和所述各第 二目标构建目标二部图， 所述各第 一目标组成所述目 标二部图中的第一部分节点， 所述各第二 目标组成所述 目标二部图中的第二部分节点， 一 个所述第一目标和一个所述第二目标组成所述目标二部图中的一条目标边； 基于所述第二目标的当前估计关键点和所述第一目标的当前检测关键点之间的相似 度， 确定所述第一目标和所述第二目标组成的目标边的权值； 利用所述二部图匹配算法对所述目标二部图求解， 得到所述各第 一目标和所述各第 二 目标的匹配结果。 2.根据权利要求1所述的方法， 其特征在于， 所述基于所述待处理视频的参考帧中各第 二目标的参考关键点进行估计， 得到所述当前帧中所述各第二 目标的当前估计关键点， 包 括： 针对每个所述第二目标的参考关键点， 获取所述当前帧与所述参考帧之间至少部分区 域的光流， 所述至少部分区域包 含所述第二目标的参 考关键点； 基于所述至少部分区域的光流， 从所述当前帧中确定所述第 二目标的参考关键点对应 的当前估计关键点。 3.根据权利要求2所述的方法， 其特征在于， 所述至少部分区域为所述第 二目标的参考 关键点的邻域， 所述获取 所述当前帧与所述 参考帧之间至少部分区域的光 流， 包括： 确定所述 参考帧中所述第二目标的参 考关键点的邻域； 获取所述当前帧与所述 参考帧之间所述邻域的光 流。 4.根据权利要求1所述的方法， 其特 征在于， 所述方法还 包括： 获取所述当前帧中各第一部位的位置代 表点； 从各所述第一目标的参考关键点中， 确定各所述第一目标的第二部位的参考关键点， 所述第一部位和第二部位表示所述第一目标的同一部位； 基于所述各第一部位的位置代表点与各所述第二部位的参考关键点两两之间的相似 度， 对所述各第一部位与所述各第一目标进行匹配。 5.根据权利要求4所述的方法， 其特征在于， 所述基于所述各第 一部位的位置代表点与 各所述第二部位的参考关键点两两之 间的相似度， 对所述各第一部位与所述各第一目标进 行匹配， 包括： 采用二部图匹配算法， 基于所述各第 一部位的位置代表点与 各所述第 二部位的参考关 键点两两之间的相似度， 对所述各第一部位与所述各第一目标进行匹配。权　利　要　求　书 1/2 页 2 CN 115100442 B 26.根据权利要求5所述的方法， 其特征在于， 所述采用二部 图匹配算法， 基于所述各第 一部位的位置代表点与各所述第二部位的参考关键点两两之间的相似度， 对所述各第一部 位与所述各第一目标进行匹配， 包括： 基于所述各第 一部位和各所述第 二部位构建部位二部图， 所述各第 一部位组成所述部 位二部图中的第一部分节点， 各所述第二部位组成所述部位二部图中的第二部分节点， 一 个所述第一部位和一个所述第二部位组成所述部位 二部图中的一条部件边； 基于所述第 一部位的位置代表点和所述第 二部位的参考关键点之间的相似度， 确定所 述第一部位和所述第二部位组成的部位 边的权值； 利用所述二部图匹配算法对所述部位二部图求解， 得到所述各第 一部位和所述各第 一 目标的匹配结果。 7.一种目标与部位匹配方法， 其特 征在于， 包括： 获取待处 理视频的当前帧中各第一目标的参 考关键点和各第一部位的位置代 表点； 从所述各第一目标的参 考关键点中， 确定所述各第一目标的第二部位的参 考关键点； 基于所述各第一部位的位置代表点与各所述第二部位的参考关键点两两之间的相似 度， 对所述各第一部位与所述各第一目标进行匹配； 其中， 所述基于所述各第 一部位的位置代表点与 各所述第 二部位的参考关键点两两之 间的相似度， 对所述各第一部位与所述各第一目标进行匹配， 包括： 基于所述各第 一部位和各所述第 二部位构建部位二部图， 所述各第 一部位组成所述部 位二部图中的第一部分节点， 各所述第二部位组成所述部位二部图中的第二部分节点， 一 个所述第一部位和一个所述第二部位组成一条部件边； 基于所述第 一部位的位置代表点和所述第 二部位的参考关键点之间的相似度， 确定所 述第一部位和所述第二部位组成的部位 边的权值； 基于所述部位二部图和所述部位边的权值， 对所述各第 一部位和所述各第 一目标进行 匹配。 8.根据权利要求7所述的方法， 其特征在于， 所述获取待处理视频的当前帧中各第 一目 标的参考关键点， 包括： 获取所述当前帧中所述各第 一目标的当前检测关键点， 所述第 一目标的当前检测关键 点是对所述第一目标进行关键点检测得到的； 将所述各第一目标的当前检测关键点， 确定为所述各第一目标的参 考关键点。 9.一种电子设备， 其特 征在于， 包括处 理器、 与所述处 理器连接的存 储器， 其中， 所述存储器存储有程序指令； 所述处理器用于执行所述存储器存储的所述程序指令以实现权利要求1 ‑6或7‑8中任 一项所述的方法。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质存储程序指令， 所述程序指令能够被处理器执行， 被执行时实现如权利要求1 ‑6或7‑8中任一项所述的方 法。权　利　要　求　书 2/2 页 3 CN 115100442 B 3