standard library
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210989990.0 (22)申请日 2022.08.18 (71)申请人 影石创新科技股份有限公司 地址 518101 广东省深圳市宝安区新 安街 道海旺社区兴业路1100号金利通金融 中心大厦2栋1 101, 1102, 1103 (72)发明人 唐小林 陈勃霖 龙良曲  (74)专利代理 机构 华进联合专利商标代理有限 公司 44224 专利代理师 郑义 (51)Int.Cl. G06V 20/40(2022.01) G06V 10/762(2022.01) G06V 10/74(2022.01) (54)发明名称 视频摘要生成方法、 装置、 计算机设备和存 储介质 (57)摘要 本申请涉及一种视频摘要生成方法、 装置、 计算机设备、 存储介质和计算机程序产品。 所述 方法包括: 将待剪辑的目标视频分割为视频片 段; 根据相邻的所述视频片段间的相似度, 对所 述视频片段进行聚类, 得到视频片段组; 计算所 述视频片段对应的第一代表性得分, 以及计算所 述视频片段所属的视频片段组对应的第二代表 性得分; 基于所述第一代表性得分与所述第二代 表性得分从所述视频片段中选取摘要视频片段, 并根据所述摘要视频片段生成所述目标视频的 视频摘要。 采用本方法能够保证所生成的视频摘 要具有多样性与代 表性。 权利要求书2页 说明书15页 附图7页 CN 115410122 A 2022.11.29 CN 115410122 A 1.一种视频摘要生成方法, 其特 征在于, 所述方法包括: 将待剪辑的目标视频分割为视频片段; 根据相邻的所述视频片段间的相似度, 对所述视频片段进行聚类, 得到 视频片段组; 计算所述视频片段对应的第 一代表性得分, 以及计算所述视频片段所属的视频片段组 对应的第二代 表性得分; 基于所述第一代表性得分与所述第二代表性得分从所述视频片段中选取摘要视频片 段, 并根据所述摘要视频片段生成所述目标视频的视频摘要。 2.根据权利要求1所述的方法, 其特征在于, 所述将待剪辑的目标视频分割为视频片段 包括: 对待剪辑的目标视频进行帧采样, 得到 视频采样帧; 对待剪辑的目标视频进行 预分割, 得到 至少两个预分割视频片段; 在所述预分割视频片段中, 分别确定各 所述视频采样帧对应的归属片段; 基于所述归属片段对所述目标视频进行重新分割, 得到目标视频片段; 若分割次数未达到分割次数阈值, 将所述目标视频片段作为所述预分割视频片段, 并 返回所述在所述预分割视频片段中, 分别确定各所述视频采样帧对应的归属片段的步骤, 直到分割次数达 到所述分割次数阈值; 将达到所述分割次数阈值 时的目标视频片段, 作为对所述目标视频进行分割所得的视 频片段。 3.根据权利要求2所述的方法, 其特征在于, 所述在所述预分割视频片段中, 确定所述 视频采样帧对应的归属片段包括: 在所述预分割视频片段中, 确定备选视频片段; 所述备选视频片段包括所述视频采样 帧所属的当前视频片段、 所述当前视频片段相邻的前一视频片段以及所述当前视频片段相 邻的后一视频片段; 计算所述目标视频中视频采样帧与各 所述备选 视频片段间的距离; 将满足距离条件的所述距离对应的备选视频片段, 确定为所述视频采样帧对应的归属 片段。 4.根据权利要求3所述的方法, 其特征在于, 所述计算所述目标视频中视频采样帧与 各 所述备选 视频片段间的距离包括: 获取所述目标视频中各视频采样帧的帧图像特征, 并基于所述帧图像特征计算各所述 备选视频片段的片段图像特 征; 根据各所述视频采样帧对应的采样时刻以及帧图像特征、 所述预分割视频片段的中间 时刻以及所述片段图像特征, 分别计算各所述视频采样帧与各所述备选视频片段间的距 离。 5.根据权利要求 4所述的方法, 其特 征在于, 所述方法还 包括: 所述获取 所述目标视频中各视频采样帧的帧图像特 征包括: 计算所述视频采样帧的各颜色通道的颜色直方图; 对所述颜色直方图进行归一 化, 得到归一 化直方图; 根据所述归一 化直方图确定所述视频采样帧的帧图像特 征。 6.根据权利要求1所述的方法, 其特征在于, 所述根据相邻的所述视频片段间的相似权 利 要 求 书 1/2 页 2 CN 115410122 A 2度, 对所述视频片段进行聚类, 得到 视频片段组包括: 从所述目标视频中的第 二个视频片段开始, 若当前视频片段与相邻的前一视频片段间 的相似度大于相似度阈值, 将所述当前视频片段划分在所述前一视频片段所属的视频片段 组; 若所述当前视频片段与所述前一视频片段间的相似度小于或等于所述相似度阈值, 从 所述当前视频片段开始新的视频片段组, 直到所述目标视频中的最后一个视频片段。 7.根据权利要求1至6任一项所述的方法, 其特征在于, 所述计算所述视频片段对应的 第一代表性得分包括: 计算第一相似度和值; 所述第 一相似度和值为所述视频片段与 所述视频片段所属的视 频片段组中其 他视频片段间相似度的和值; 基于所述视频片段所属的视频片段组中各视频片段的长度和, 与所述目标视频的长度 间比值, 确定所述视频片段组对应的权 重值; 根据所述权 重值与所述第一相似度和值, 计算得到第一代 表性得分。 8.根据权利要求1至6任一项所述的方法, 其特征在于, 所述计算所述视频片段所属的 视频片段组对应的第二代 表性得分包括: 计算第二相似度和值; 所述第 二相似度和值为所述视频片段所属的视频片段组中任一 视频片段与所述所属的视频片段组之外的其他视频片段组中任一视频片段间相似度的和 值; 根据所述第 二相似度和值、 各所述视频片段组对应的权重值以及各所述视频片段组中 视频片段的数量, 计算得到第二代 表性得分。 9.一种视频摘要生成装置, 其特 征在于, 所述装置包括: 分割模块, 用于将待剪辑的目标视频分割为视频片段; 聚类模块, 用于根据相邻的所述视频片段间的相似度, 对所述视频片段进行聚类, 得到 视频片段组; 计算模块, 用于计算所述视频片段对应的第一代表性得分, 以及计算所述视频片段所 属的视频片段组对应的第二代 表性得分; 生成模块, 用于基于所述第 一代表性得分与所述第 二代表性得分从所述视频片段中选 取摘要视频片段, 并根据所述摘要视频片段生成所述目标视频的视频摘要。 10.一种计算机设备, 包括存储器和 处理器, 所述存储器存储有计算机程序, 其特征在 于, 所述处 理器执行所述计算机程序时实现权利要求1至8中任一项所述的方法的步骤。 11.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序 被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。 12.一种计算机程序产品, 包括计算机程序, 其特征在于, 该计算机程序被处理器执行 时实现权利要求1至8中任一项所述的方法的步骤。权 利 要 求 书 2/2 页 3 CN 115410122 A 3

PDF文档 专利 视频摘要生成方法、装置、计算机设备和存储介质

文档预览
中文文档 25 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共25页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 视频摘要生成方法、装置、计算机设备和存储介质 第 1 页 专利 视频摘要生成方法、装置、计算机设备和存储介质 第 2 页 专利 视频摘要生成方法、装置、计算机设备和存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-18 22:31:36上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。