(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210323179.9 (22)申请日 2022.03.29 (71)申请人 青岛海尔电冰箱有限公司 地址 266101 山东省青岛市崂山区海尔路1 号海尔工业园 申请人 海尔智家 股份有限公司 (72)发明人 毕研华　孔令磊　 (74)专利代理 机构 苏州威世朋知识产权代理事 务所(普通 合伙) 32235 专利代理师 沈晓敏 (51)Int.Cl. G06V 20/10(2022.01) G06V 10/26(2022.01) G06V 10/44(2022.01) G06V 10/75(2022.01)G06K 9/62(2022.01) (54)发明名称 冰箱内物品信息识别方法、 冰箱和计算机存 储介质 (57)摘要 本发明揭示了一种冰箱内物品信息识别方 法， 包括步骤： 获取冰箱瓶座内空间的鸟瞰图像； 在所述鸟瞰图像中识别出相交轮廓线组成的轮 廓框； 在所述鸟瞰图像中分割出多个检测框， 每 个所述检测框对应于一个物品； 选取一轮廓线， 并识别所述轮廓线位于轮廓框的方位； 识别所述 检测框的中心点； 若所述检测框中心点与所述轮 廓线相对方位与所述轮廓线位于轮廓框的方位 相同， 则对应的物品为镜像物品； 若所述检测框 中心点与所述轮廓线相对方位与所述轮廓线位 于轮廓框的方位相反， 则对应的物品为真实物 品。 以此排除镜像物品的干扰， 提高识别算法的 准确性， 并且在瓶座壁面下端作磨砂处理， 避免 该物品检测框中心点落在轮廓框之外导致识别 算法判断失误的问题。 权利要求书2页 说明书8页 附图7页 CN 114882348 A 2022.08.09 CN 114882348 A 1.一种冰箱内物品信息识别方法， 其特 征在于， 包括 步骤： 获取冰箱瓶 座内空间的鸟瞰图像； 在所述鸟瞰图像中识别出相交轮廓线组成的轮廓框； 在所述鸟瞰图像中分割出多个 检测框， 每 个所述检测框对应于一个物品； 选取一轮廓线， 并识别所述轮廓线位于轮廓框的方位； 识别所述检测框的中心点； 若所述检测框的中心点与 所述轮廓线相对方位与 所述轮廓线位于轮廓框的方位相同， 则对应的物品为镜像物品； 若所述检测框的中心点与 所述轮廓线相对方位与 所述轮廓线位于轮廓框的方位相反， 则对应的物品为真实物品。 2.根据权利要求1所述的冰箱内物品信息识别方法， 其特征在于， “在所述鸟瞰图像中 识别出相交轮廓线组成的轮廓框 ”具体包括： 利用边缘检测算法， 标定出 所述鸟瞰图像磨砂区域相交的轮廓线； 所述轮廓线相交 组成轮廓框 。 3.根据权利要求2所述的冰箱内物品信息识别方法， 其特征在于， “在所述鸟瞰图像中 分割出多个 检测框， 每 个所述检测框对应于一个物品 ”具体包括： 利用Yolo V4目标检测算法， 标定出 所述鸟瞰图像中每 个物品所对应的检测框； 所述鸟瞰图像中的物品包括放置于所述瓶座内的真实物品以及对应于所述真实物品 的镜像物品。 4.根据权利要求3所述的冰箱内物品信息识别方法， 其特征在于， 在 “识别所述检测框 的中心点 ”之前还包括步骤： 获取与所述轮廓线相邻两侧的检测框 。 5.根据权利要求 4所述的冰箱内物品信息识别方法， 其特 征在于， 所述方法具体包括： 选取一轮廓线， 所述轮廓线位于所述轮廓框的上 方； 识别所述检测框的中心点； 若所述检测框的中心点 位于所述轮廓线上 方， 则对应的物品为镜像物品； 若所述检测框的中心点 位于所述轮廓线下 方， 则对应的物品为真实物品。 6.根据权利要求5所述的冰箱内物品信息识别方法， 其特 征在于， 所述方法具体包括： 选取一轮廓线， 所述轮廓线位于所述轮廓框的下 方； 识别所述检测框的中心点； 若所述检测框的中心点 位于所述轮廓线上 方， 则对应的物品为真实物品； 若所述检测框的中心点 位于所述轮廓线下 方， 则对应的物品为镜像物品。 7.一种冰箱内物品信息识别方法， 其特 征在于， 包括 步骤： 获取冰箱瓶 座内空间的鸟瞰图像； 在所述鸟瞰图像中识别出相交轮廓线组成的轮廓框； 在所述鸟瞰图像中分割出多个 检测框， 每 个所述检测框对应于一个物品； 若所述检测框和轮廓框的重合面积与所述检测框面积的占比小于设定 阈值， 则对应的 物品为镜像物品； 若所述检测框和轮廓框的重合面积与所述检测框面积的占比远大于设定阈值， 则对应权　利　要　求　书 1/2 页 2 CN 114882348 A 2的物品为真实物品。 8.根据权利要求7所述的冰箱内物品信息识别方法， 其特征在于， “在所述鸟瞰图像中 识别出相交轮廓线组成的轮廓框 ”具体包括： 利用边缘检测算法， 标定出 所述鸟瞰图像磨砂区域相交的轮廓线； 所述轮廓线相交 组成轮廓框 。 9.根据权利要求8所述的冰箱内物品信息识别方法， 其特征在于， “在所述鸟瞰图像中 分割出多个 检测框， 每 个所述检测框对应于一个物品 ”具体包括： 利用Yolo V4目标检测算法， 标定出 所述鸟瞰图像中每 个物品所对应的检测框； 所述鸟瞰图像中的物品包括放置于所述瓶座内的真实物品以及对应于所述真实物品 的镜像物品。 10.根据权利要求7所述的冰箱内物品信息识别方法， 其特征在于， 所述设定阈值具体 为5％～10％。 11.一种冰箱， 包括： 瓶 座， 摄像头以及存 储器和处 理器， 其特 征在于， 所述瓶座包括瓶座顶部、 底部和瓶座壁面， 所述摄像头设于所述瓶座顶部 中间位置， 竖 直向下设置； 所述瓶座底部用于放置物品； 所述瓶座壁面至少一 面为玻璃面； 所述玻璃面下端作磨砂处 理； 所述存储器存储可在所述处理器上运行的计算机程序， 所述处理器执行所述程序时实 现如权利要求1 ‑10任意一项所述冰箱内物品信息识别方法的步骤。 12.一种计算机存储介质， 其中存储有计算机程序， 其特征在于， 所述计算机程序运行 时导致所述计算机存储介质的所在设备执行根据权利要求1 ‑10中任意一项所述冰箱内物 品信息识别方法的步骤。权　利　要　求　书 2/2 页 3 CN 114882348 A 3