(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211047988.8 (22)申请日 2022.08.30 (71)申请人 青岛云天励飞科技有限公司 地址 266000 山东省青岛市崂山区科 苑纬 一路1号青岛国际创新园二期D2座 2601室 申请人 深圳云天励飞技 术股份有限公司 (72)发明人 曾佐祺　 (74)专利代理 机构 深圳驿航知识产权代理事务 所(普通合伙) 44605 专利代理师 杨伦 (51)Int.Cl. G06V 20/52(2022.01) G06V 20/40(2022.01) G06V 40/20(2022.01)G06V 10/764(2022.01) G06V 10/82(2022.01) (54)发明名称 物品监测方法、 装置、 电子设备及存 储介质 (57)摘要 本发明实施例提供一种物品监测方法， 方法 包括： 获取目标区域的监控图像， 监控 图像中包 括目标人员以及目标物品； 基于监控图像， 对目 标人员以及目标物品进行状态检测， 得到目标人 员与所述目标物品之间的拿放状态信息； 基于拿 放状态信息， 对目标人员进行行为识别， 得到目 标人员的行为识别结果； 通过目标人员的行为识 别结果， 对目标物品进行监测。 通过目标区域的 监控图像对目标人员与目标物品进行状态检测， 得到目标人员与目标物品之间的拿放状态信息， 根据目标人员与 目标物品之间的拿放状态信息 识别目标人员的行为， 可以通过目标人员的行为 来对目标物品进行监测， 便于追查目标人员对于 目标物品的行为， 从而提高特定物品的销售管理 效率。 权利要求书2页 说明书12页 附图1页 CN 115497038 A 2022.12.20 CN 115497038 A 1.一种物品监测方法， 其特 征在于， 包括以下步骤： 获取目标区域的监控图像， 所述 监控图像中包括目标 人员以及目标物品； 基于所述监控图像， 对所述目标人员以及所述目标物品进行状态检测， 得到所述目标 人员与所述目标物品之间的拿放状态信息； 基于所述拿放状态信息， 对所述目标人员进行行为识别， 得到所述目标人员的行为识 别结果； 通过所述目标 人员的行为识别结果， 对所述目标物品进行监测。 2.如权利要求1所述的物品监测方法， 其特征在于， 所述监控图像包括连续的帧图像， 所述基于所述监控图像， 对所述 目标人员以及所述 目标物品进行状态检测， 得到所述 目标 人员与所述目标物品之间的拿放状态信息， 包括： 对每一帧图像 中的所述目标人员与 所述目标物品都进行状态检测， 得到所述每一帧图 像中所述目标 人员与所述目标物品之间的拿放属性； 将所述拿放属性按对应帧图像的时间顺序进行排序， 得到所述目标人员与 所述目标物 品之间的拿放状态信息 。 3.如权利要求2所述的物品监测方法， 其特征在于， 所述对每一帧图像中的所述目标人 员与所述目标物品都进行状态检测， 得到所述每一帧图像中所述目标人员与所述目标物品 之间的拿放属性， 包括： 对所述每一帧图像进行目标检测， 得到所述目标 人员的手部检测结果； 对所述手部检测结果进行所述目标物品的属性检测， 得到所述每一帧图像中所述目标 人员与所述目标物品之间的拿放属性。 4.如权利要求3所述的物品监测方法， 其特征在于， 所述对所述每一帧图像进行目标检 测， 得到所述目标 人员的手部检测结果， 包括： 对所述每一帧图像进行第一目标检测， 得到人体 检测框； 对所述每一帧图像进行第二目标检测， 得到手部检测框； 将所述每一帧图像中的所述人体检测框与 所述手部检测框进行关联， 得到所述每一帧 图像中的所述人体 检测框与所述手部检测框之间的关联关系； 根据所述每一帧图像中的所述人体检测框与所述手部检测框之间的关联关系以及所 述每一帧图像中的手部检测框是否包括所述目标物品， 得到所述目标人员的手部检测结 果。 5.如权利要求4所述的物品监测方法， 其特征在于， 所述将所述每一帧图像中的所述人 体检测框与所述手部检测框进 行关联， 得到所述每一帧图像中的所述人体检测框与所述手 部检测框之间的关联关系， 包括： 计算所述每一帧图像中的所述人体 检测框与所述手部检测框之间的检测框距离； 根据所述检测框距离， 得到所述每一帧图像中的所述人体检测框与 所述手部检测框之 间的关联关系。 6.如权利要求5所述的物品监测方法， 其特征在于， 所述将拿放属性按对应帧图像的时 间顺序进行排序， 得到所述目标 人员与所述目标物品之间的拿放状态信息， 包括： 对各个帧图像 中同属于一个所述目标人员的人体检测框分配第 一标识， 以及对相邻帧 图像中同属于一个所述目标 人员的手部检测框分配第二标识；权　利　要　求　书 1/2 页 2 CN 115497038 A 2根据所述第 一标识与 所述第二标识， 将各个所述目标人员对应的拿放属性按对应帧图 像的时间顺序进行排序， 得到各个所述目标人员与对应所述目标物品之间的拿放状态信 息。 7.如权利要求1至6中任一所述的物品监测方法， 其特征在于， 所述基于所述拿放状态 信息， 对所述目标 人员进行 行为识别， 得到所述目标 人员的行为识别结果， 包括： 对所述拿放状态信息进行 滤波处理， 得到滤波后的拿放状态信息； 根据所述滤波后的拿放状态信息， 对所述目标人员进行行为识别， 得到所述目标人员 的行为识别结果。 8.一种物品监测装置， 其特 征在于， 所述装置包括： 获取模块， 用于获取目标区域的监控图像， 所述监控图像中包括目标人员以及目标物 品； 检测模块， 用于基于所述监控图像， 对所述目标人员以及所述目标物品进行状态检测， 得到所述目标 人员与所述目标物品之间的拿放状态信息； 识别模块， 用于基于所述拿放状态信 息， 对所述目标人员进行行为识别， 得到所述目标 人员的行为识别结果； 监测模块， 用于通过 所述目标 人员的行为识别结果， 对所述目标物品进行监测。 9.一种电子设备， 其特征在于， 包括： 存储器、 处理器及存储在所述存储器上并可在所 述处理器上运行的计算机程序， 所述处理器执行所述计算机程序时实现如权利要求 1至7中 任一项所述的物品监测方法中的步骤。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有计算机 程序， 所述计算机程序被处理器执行时实现如权利要求 1至7中任一项 所述的物品监测方法 中的步骤。权　利　要　求　书 2/2 页 3 CN 115497038 A 3