(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202211098475.X (22)申请日 2022.09.09 (65)同一申请的已公布的文献号 申请公布号 CN 115170935 A (43)申请公布日 2022.10.11 (73)专利权人 南通商翼信息科技有限公司 地址 226000 江苏省南 通市开发区广州路 42号458室 (72)发明人 俞青松　黄国杰　 (74)专利代理 机构 邯郸泽科知识产权代理有限 公司 13169 专利代理师 张萍 (51)Int.Cl. G06V 20/00(2022.01) G06V 10/26(2022.01)G06V 10/74(2022.01) (56)对比文件 CN 113284177 A,2021.08.20 CN 113362333 A,2021.09.07 CN 112802030 A,2021.0 5.14 审查员 朱雪梅 (54)发明名称 依据图像理解的垃圾桶状态识别方法及设 备 (57)摘要 本发明公开了一种依据图像理解的垃圾桶 状态识别方法及设备， 涉及图像识别领域。 主要 包括： 对垃圾桶的灰度图像进行基于边缘的分 割， 并将所有分割区域中灰度方差最小的分割区 域作为参考区域， 以将相对于参考区域的差异程 度大于预设第一阈值的分割 区域的面积占比作 为破碎程度指标； 计算垃圾桶的顶部预设范围内 的图像与其对应的标准图像的第一相似度， 以 及， 垃圾桶的底部预设范围内的图像与其对应的 标准图像的第二相似度； 根据第一相似度、 第二 相似度以及破碎程度指标， 获取垃圾桶的收容指 标， 以确定垃圾桶是否被装满。 本发明实施例避 免了人工 前往垃圾桶附近对其状态进行识别， 从 而提高了对 垃圾桶状态的识别效率， 同时避免了 人力的浪费。 权利要求书1页 说明书6页 附图1页 CN 115170935 B 2022.12.27 CN 115170935 B 1.一种依据图像理解的垃圾桶状态 识别方法， 其特 征在于， 包括： 对垃圾桶的预设方向的灰度图像进行基于边缘的分割， 分别计算分割后每一分割区域 的灰度方差， 并将所有分割区域中灰度方差最小的分割区域作为 参考区域； 分别计算参考区域以外的每一分割区域相对于参考 区域的差异程度， 并将差异程度 大 于预设第一阈值的分割区域在所有分割区域中的面积占比， 作为垃圾桶的破碎程度指标； 对垃圾桶的预设方向的灰度图像中顶部预设范围内的图像， 与 该顶部预设范围内的图 像对应的标准图像进行相似度计算获得第一相似度； 对垃圾桶的预设方向的灰度图像中底部预设范围内的图像， 与 该底部预设范围内的图 像对应的标准图像进行相似度计算获得第二相似度； 根据第一相似度、 第二相似度以及破碎程度指标， 获取垃圾桶的收容指标， 获取垃圾桶 的收容指标的公式为： 其中， 为垃圾桶的收容指标， 为第一相似度， 为第二相似度， 为破碎程度指标； 根据垃圾桶的收容指标， 确定垃圾桶的状态是否为装 满。 2.根据权利要求1所述的依据图像理解的垃圾桶状态识别方法， 其特征在于， 分别计算 参考区域以外的每一分割区域相对于参 考区域的差异程度， 包括： 将参考区域以外的每一分割区域中每一像素点的灰度值相对于参考区域的灰度均值 的差值的平均值， 作为 参考区域以外的每一分割区域相对于参 考区域的差异程度。 3.根据权利要求1所述的依据图像理解的垃圾桶状态识别方法， 其特征在于， 所述预设 方向为正面或侧面。 4.根据权利要求1所述的依据图像理解的垃圾桶状态识别方法， 其特征在于， 根据 垃圾 桶的收容指标， 确定垃圾桶的状态是否为装 满， 包括： 在垃圾桶的收容指标 大于预设第二阈值的情况 下， 将垃圾桶的状态确定为装 满。 5.根据权利要求1所述的依据图像理解的垃圾桶状态识别方法， 其特征在于， 对垃圾桶 的预设方向的灰度图像进 行基于边缘的分割前， 所述方法进一步包括： 利用DNN对 垃圾桶的 预设方向的灰度图像进行 预处理， 使其中背景部分的像素值 为0。 6.根据权利要求1所述的依据图像理解的垃圾桶状态识别方法， 其特征在于， 所述方法 进一步包括： 对状态被判定为装 满的垃圾桶进行处 理。 7.根据权利要求6所述的依据图像理解的垃圾桶状态识别方法， 其特征在于， 对状态被 判定为装满的垃圾桶进 行处理， 包括： 将 被判定为装满的垃圾桶中的垃圾进行清理， 或者将 被判定为装 满的垃圾桶替换为空的垃圾桶。 8.一种依据图像理解的垃圾桶状态识别设备， 包括： 存储器和 处理器， 其特征在于， 所 述处理器执行所述存储器存储的计算机程序， 以实现如权利要求1 ‑7中任一项所述的依据 图像理解的垃圾桶状态 识别方法。权　利　要　求　书 1/1 页 2 CN 115170935 B 2依据图像理解的垃圾桶状态识别方 法及设备 技术领域 [0001]本申请涉及图像识别领域， 具体涉及一种依据图像 理解的垃圾桶状态识别方法及 设备。 背景技术 [0002]在垃圾回收处会设置有大量的垃圾桶， 以便垃圾投放人员进行 垃圾投放。 [0003]在垃圾桶堆满的情况下， 需要对其中的垃圾及时进行处理； 此外， 在垃圾桶存在破 裂的情况下， 继续向其中投放垃圾会出现垃圾桶外溢的情况， 因此垃圾投放人员会更倾向 于将垃圾投放至垃圾桶底部， 从而影响垃圾桶处的观感。 [0004]目前依赖于人工对垃圾桶的上述情况进行发现， 然而， 人工进行垃圾桶状态识别 的过程中， 可能需要消耗过多的体力， 且可能在人工到达垃圾桶附近后， 垃圾桶处于空的状 态或者并未被装 满， 从而造成人力的浪费。 发明内容 [0005]针对上述技术问题， 本发明提供了一种依据图像 理解的垃圾桶状态识别方法及设 备， 通过对垃圾桶的预设方向的图像进行分析， 能够有效获得对垃圾回收处所设置的垃圾 桶存在破裂或者堆满的情况 的识别结果， 避免了人工前往垃圾桶附近对其状态进行识别， 从而提高了对垃圾桶状态的识别效率， 同时避免了人力的浪费。 [0006]第一方面， 本发明实施例提出了一种依据图像理解的垃圾桶状态 识别方法， 包括： [0007]对垃圾桶的预设方向的灰度图像进行基于边缘的分割， 分别计算分割后每一分割 区域的灰度方差， 并将所有分割区域中灰度方差最小的分割区域作为 参考区域。 [0008]分别计算参考区域以外的每一分割区域相对于参考区域的差异程度， 并将差异程 度大于预设第一阈值的分割区域在所有分割区域中的面积占比， 作为垃圾桶的破碎程度指 标。 [0009]对垃圾桶的预设方向的灰度图像中顶部预设范围内的图像， 与该顶部预设范围内 的图像对应的标准图像进行相似度计算获得第一相似度。 [0010]对垃圾桶的预设方向的灰度图像中底部预设范围内的图像， 与该底部预设范围内 的图像对应的标准图像进行相似度计算获得第二相似度。 [0011]根据第一相似度、 第二相似度以及破碎程度指标， 获取垃圾桶的收容指标， 并根据 垃圾桶的收容指标， 确定垃圾桶的状态是否为装 满。 [0012]进一步的， 依据图像理解的垃圾桶状态识别方法中， 分别计算参考区域以外 的每 一分割区域相对于参 考区域的差异程度， 包括： [0013]将参考区域以外的每一分割区域中每一像素点的灰度值相对于参考区域的灰度 均值的差值的平均值， 作为 参考区域以外的每一分割区域相对于参 考区域的差异程度。 [0014]进一步的， 依据图像 理解的垃圾桶状态识别方法 中， 根据第一相似度、 第二相似度 以及破碎程度指标， 获取 垃圾桶的收容指标， 包括：说　明　书 1/6 页 3 CN 115170935 B 3