(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211040388.9 (22)申请日 2022.08.29 (71)申请人 深圳进化动力数码科技有限公司 地址 518000 广东省深圳市前海深港合作 区南山街道桂湾三路91号景兴海上大 厦4101-410 3 (72)发明人 黄伟冰　高路房　傅晟　林彦好　 张威　苏木荣　石昱星　冯春　 戴思璋　揭佳明　 (51)Int.Cl. G06V 40/16(2022.01) G06V 20/52(2022.01) G06V 10/82(2022.01) G06N 5/04(2006.01) G06Q 30/00(2012.01) (54)发明名称 一种便利店无 人售货时的防盗损监测系统 (57)摘要 本发明涉及无人售货的技术领域， 尤其是涉 及一种便利店无人售货时的防盗损监测系统， 其 包括： 进店摄像模组； 店内摄像模组； 结算摄像模 组； 处理模块包括： 行为 分析单元， 用于根据视频 流数据中的多帧图像进行分析， 得到是否存在拿 取行为； 商品获取单元， 根据多帧图像获取被拿 取商品； 拿取人员人脸获取单元， 根据多帧图像 获取拿取人员人脸图像； 关联单元， 将该多帧图 像以及被拿取商品关联于拿取人员人脸图像； 比 对单元， 用于将拿取人员人脸图像与结算人脸图 像进行比对； 验证单元， 对被拿取商品进行验证 以判断是否存在偷窃行为； 报警单元， 发送视频 流数据给后台终端； 所述后台终端配备于后台管 理人员。 本申请具有 方便地对便利店进行监督防 盗的效果。 权利要求书2页 说明书7页 附图2页 CN 115376190 A 2022.11.22 CN 115376190 A 1.一种便利店无 人售货时的防盗损监测系统， 其特 征在于， 包括： 进店摄像模组， 设置于便利店入口处， 用于获取进入店内的顾客的进店人脸图像， 所述 进店人脸图像携带有 进店时间戳信息； 店内摄像模组， 设置于店内， 用于每隔预设时长对货柜区域进行拍摄以获取一段视频 流数据并发送给处 理单元， 所述预设时长和视频流数据的时长一 致； 结算摄像模组， 设置于结算区域， 用于对结算区域进行拍摄以获取结算区域的结算人 脸图像； 处理模块， 所述处 理模块包括： 行为分析 单元， 用于根据视频流数据中的多帧图像进行分析， 得到是否存在拿取 行为； 商品获取 单元， 用于在存在拿取 行为的情况 下， 根据所述多帧图像获取被 拿取商品； 拿取人员人脸获取单元， 用于在存在拿取行为的情况下， 根据所述多帧图像获取拿取 人员人脸图像； 关联单元， 用于在存在拿取行为的情况下， 将该多帧图像以及被拿取商品关联于所述 拿取人员人脸图像； 比对单元， 用于将所述拿取 人员人脸图像与所述结算人脸图像进行比对； 验证单元， 用于当比对结果超过预设相似度时， 对被拿取商品进行验证以判断是否存 在偷窃行为； 报警单元， 用于当判断存在偷窃行为时， 发送所述视频流数据给后台终端； 其中， 所述后台终端配备于后台管理人员。 2.如权利要求1所述的便利店无人售货时的防盗损监测系统， 其特征在于， 所述对被拿 取商品进行验证以判断是否存在偷窃行为， 包括： 统计所述拿取 人员人脸图像所关联的所有被 拿取商品的价格总额； 获取所述拿取 人员人脸图像所对应的实际结算金额； 当价格总额和实际结算金额 不符时， 判断为存在偷窃行为。 3.如权利要求1所述的便利店无人售货时的防盗损监测系统， 其特征在于， 所述根据视 频流数据中的多帧图像进行分析， 得到是否存在拿取 行为， 包括： 按照预设规则在所述视频流数据中择 取出多帧图像； 将多帧图像输入预 先训练好的行为分析模型， 推理得到是否存在拿取 行为。 4.如权利要求1所述的便利店无人售货时的防盗损监测系统， 其特征在于， 所述根据 所 述多帧图像获取被 拿取商品， 包括： 通过商品握持识别模型推理出多帧图像中的被 握持状态的商品图像； 将所述处于被 握持状态的商品图像所对应的商品作为被 拿取商品。 5.如权利要求4所述的便利店无人售货时的防盗损监测系统， 其特征在于， 根据 所述多 帧图像获取拿取 人员人脸图像， 包括： 通过人脸识别模型推理出多帧图像中的人脸图像并标记出 人脸位置； 计算各帧图像中各 人脸图像与被 握持状态的商品图像的像素距离； 计算每个人脸图像在各帧图像中与被 拿取商品的像素距离的平均值； 将像素距离的平均值 最小的人脸图像作为拿取 人员人脸图像。 6.如权利要求1所述的便利店无 人售货时的防盗损监测系统， 其特 征在于， 还 包括：权　利　要　求　书 1/2 页 2 CN 115376190 A 2烟草展位摄像模组， 设置于店内烟草展位处， 用于每隔预设时长对烟草展位区域进行 拍摄以获取一段烟草展位视频流数据并发送 给处理单元， 所述预设时长和视频流数据的时 长一致； 所述行为分析单元还用于根据烟草展位视频流数据中的多帧烟草展位图像进行分析， 得到是否存在 烟草商品拿取 行为； 拿取人员人脸获取单元还用于在获取到存在香烟拿取行为的情况下， 根据所述多帧烟 草展位图像获取烟草商品拿取 人员人脸图像； 所述处理模块还 包括： 未成年人分析 单元， 用于对香烟拿取 人员人脸图像进行分析以判断是否为未成年人； 人员标记单元， 用于在判断为未成年人的情况下， 将该香烟拿取人员人脸图像标记为 禁止香烟 购买人员。 7.如权利要求6所述的便利店无人售货时的防盗损监测系统， 其特征在于， 所述处理模 块还包括： 以往购买商 品获取单元， 用于获取被标记为禁止香烟购买人员的香烟拿取人员人脸图 像在历史购买数据库中以往的购买商品， 其中， 所述以往的购买商品不包括 香烟； 年龄推理单元， 用于将所述香烟拿取人员人脸图像的以往的购买商 品输入预先训练好 的年龄推理模型， 推理得到人员是否为未成年； 标记去除单元， 用于当推理得到人员不是未成年时， 去 除该香烟拿取人员人脸图像的 标记。 8.如权利要求1所述的便利店无 人售货时的防盗损监测系统， 其特 征在于， 还 包括： 远程通话模组， 用于 接收来自后台终端的语音信息并播报。权　利　要　求　书 2/2 页 3 CN 115376190 A 3