(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210935438.3 (22)申请日 2022.08.05 (65)同一申请的已公布的文献号 申请公布号 CN 115062186 A (43)申请公布日 2022.09.16 (73)专利权人 北京远鉴信息技 术有限公司 地址 100000 北京市海淀区西四环北路158 号1幢7层80 001-2 (72)发明人 白世杰　王楚涵　 (74)专利代理 机构 北京超凡宏宇专利代理事务 所(特殊普通 合伙) 11463 专利代理师 刘凤 (51)Int.Cl. G06F 16/75(2019.01) G06F 16/783(2019.01)G06F 16/732(2019.01) G06F 16/73(2019.01) G06V 10/74(2022.01) G06V 10/764(2022.01) G06V 20/40(2022.01) 审查员 王璐 (54)发明名称 一种视频内容检索方法、 装置、 设备以及存 储介质 (57)摘要 本公开提供了一种视频内容检索方法、 装 置、 设备以及存储介质， 该方法包括： 获取目标视 频文件中各个帧视频图像的特征向量； 基于目标 视频文件的特征向量， 对目标视频文件进行归 类， 得到多个视频帧集合； 对每个视频帧集合中 所有帧视频图像的特征向量进行计算， 得到第一 平均特征向量； 根据第一平均特征向量进行求交 集计算， 确定目标视频文件对应的有害特征向量 集合； 根据有害特征向量集合和各个视频帧集合 中任一帧视频图像的特征向量之间的相似度， 从 多个视频帧集合中筛选出候选有害视频帧集合； 从候选有害视频帧集合中各个帧视频图像中， 确 定出存在有害内容的目标帧视频图像。 这样， 既 保证视频内容检索的准确性， 又实现了快速定位 有害内容。 权利要求书3页 说明书14页 附图4页 CN 115062186 B 2022.10.28 CN 115062186 B 1.一种视频内容检索方法， 其特 征在于， 所述方法包括： 获取目标视频文件中各个帧视频图像的特 征向量； 基于所述目标视频文件中各个帧视频图像的特征向量， 对所述目标视频文件的各个帧 视频图像进 行归类， 得到多个视频帧集合； 其中， 所述视频帧集合中的任意相 邻两帧视频图 像分别对应的特 征向量之间的相似度小于预设阈值； 对每个所述视频帧集合中所有帧视频图像的特征向量进行特征向量平均值计算， 得到 每个所述视频帧集 合对应的第一平均特 征向量； 将所述目标视频文件中每两个所述视频帧集合分别对应的所述第一平均特征向量进 行求交集计算， 确定所述目标视频文件 对应的有 害特征向量集合； 根据所述目标视频文件对应的所述有害特征向量集合和各个所述视频帧集合中任一 帧视频图像的特征向量之 间的相似度， 从多个所述视频帧集合中筛选出候选有害视频帧集 合； 基于所述候选有害视频帧集合中各个帧视频图像的特征向量和所述有害特征向量集 合， 确定存在有 害内容的目标帧视频图像。 2.根据权利要求1所述的方法， 其特征在于， 根据以下步骤对所述目标视频文件的任一 帧视频图像进行归类包括： 计算所述目标视频文件中所述帧视频图像之前的任意相邻两帧视频图像对应的特征 向量之间的第一内容距离； 所述第一内容距离用于表征所述帧视频图像之前的任意相 邻两 帧视频图像之间的相似度； 计算所述帧视频图像与前一帧视频图像分别对应的特征向量之间的第 二内容距离； 所 述第二内容距离用于表征所述帧视频图像与前一帧视频图像分别对应的特征向量之间的 相似度； 计算第二平均特征向量和所述第 二内容距离的内容距离差值； 所述第 二平均特征向量 为所述目标视频文件中所述帧视频图像之前的所有任意相邻两 帧视频图像对应的第一内 容距离的平均值； 检测所述内容距离 差值和预设阈值的大小； 若所述内容距离差值大于预设阈值， 则将所述帧视频图像归类到第一目标视频帧集 合； 所述第一目标视频帧集合为所述帧视频图像之前的多帧视频图像归类成的视频帧集 合； 若所述内容距离差值小于预设阈值， 则将所述帧视频图像归类到第二目标视频帧集 合； 所述第二目标视频帧集合是以所述帧视频图像作为第一帧视频图像进 行归类的视频帧 集合。 3.根据权利要求1所述的方法， 其特征在于， 所述将所述目标视频文件中每两个所述视 频帧集合分别对应的第一平均特征向量进 行求交集计算， 确定所述目标视频文件对应的有 害特征向量集合， 包括： 将任意两个所述视频帧集合分别对应的所述第 一平均特征向量进行求交集计算， 得到 一个交集结果； 对所述目标视频文件对应的多个交集结果进行求并集计算， 得到所述有害特征向量集 合。权　利　要　求　书 1/3 页 2 CN 115062186 B 24.根据权利要求1所述的方法， 其特征在于， 所述根据所述目标视频文件对应的所述有 害特征向量集合和各个所述视频帧集合中任一帧视频图像的特征向量之间的相似度， 从多 个所述视频帧集 合中筛选出候选有 害视频帧集 合， 包括： 计算所述有害特征向量集合和各个所述视频帧集合中任一帧视频图像对应的特征向 量的第一编辑距离； 所述第一编辑距离用于表征所述有害 特征向量集合和各个所述视频帧 集合中任一帧视频图像之间的相似度； 根据各个所述视频帧集合对应的所述第一编辑距离， 对各个所述视频帧集合进行排 序； 根据各个所述视频帧集合的排序顺序， 从多个所述视频帧集合中筛选出所述候选有害 视频帧集 合。 5.根据权利要求1所述的方法， 其特征在于， 所述基于所述候选有害视频帧集合中各个 帧视频图像的特征向量和所述有害特征向量集合， 确定存在有害内容的目标帧视频图像， 包括： 计算所述候选有害视频帧集合中各个帧视频图像的特征向量和所述有害特征向量集 合的第二编辑距离； 所述第二编辑距离用于表征所述候选有害视频帧集合中各个帧视频图 像和所述有 害特征向量集合之间的相似度； 根据所述候选有害视频帧集合中各个帧视频图像对应的所述第 二编辑距离， 对所述候 选有害视频帧集 合中各个帧视频图像进行排序； 根据所述候选有害视频帧集合中各个帧视频图像的排序顺序， 从所述候选有害视频帧 集合中各个帧视频图像中确定出存在有 害内容的目标帧视频图像。 6.一种视频内容检索装置， 其特 征在于， 所述装置包括： 获取模块， 获取目标视频文件中各个帧视频图像的特 征向量； 归类模块， 用于基于所述目标视频文件中各个帧视频图像的特征向量， 对所述目标视 频文件的各个帧视频图像进 行归类， 得到多个视频帧集合； 其中， 所述视频帧集合中的任意 相邻两帧视频图像分别对应的特 征向量之间的相似度小于预设阈值； 第一计算模块， 用于对每个所述视频帧集合中所有帧视频图像的特征向量进行特征向 量平均值计算， 得到每 个所述视频帧集 合对应的第一平均特 征向量； 第二计算模块， 用于将所述目标视频文件中每两个所述视频帧集合分别对应的所述第 一平均特 征向量进行求交集计算， 确定所述目标视频文件 对应的有 害特征向量集合； 筛选模块， 用于根据 所述目标视频文件对应的所述有害特征向量集合和各个所述视频 帧集合中任一帧视频图像的特征向量之 间的相似度， 从多个所述视频帧集合中筛选出候选 有害视频帧集 合； 确定模块， 用于基于所述候选有害视频帧集合中各个帧视频图像的特征向量和所述有 害特征向量集合， 确定存在有 害内容的目标帧视频图像。 7.根据权利要求6所述的装置， 其特征在于， 所述归类模块， 用于根据以下步骤对所述 目标视频文件的任一帧视频图像进行归类包括： 计算所述目标视频文件中所述帧视频图像之前的任意相邻两帧视频图像对应的特征 向量之间的第一内容距离； 所述第一内容距离用于表征所述帧视频图像之前的任意相 邻两 帧视频图像之间的相似度；权　利　要　求　书 2/3 页 3 CN 115062186 B 3