(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210981170.7 (22)申请日 2022.08.16 (71)申请人 上海浦东发展银行股份有限公司 地址 200000 上海市黄浦区中山 东一路12 号 (72)发明人 银星茜　谢柳　刘晓颖　朱佳宝　 赵群　杨欣捷　 (74)专利代理 机构 北京品源专利代理有限公司 11332 专利代理师 黄立伟 (51)Int.Cl. G06V 20/52(2022.01) G06V 40/10(2022.01) (54)发明名称 多视角的携物监控方法、 装置、 设备及 介质 (57)摘要 本发明提供了一种多视角的携物 监控方法、 装置、 设备及介质。 其中， 该方法包括： 对各视角 的监控图像分别进行人员检测， 得到各视角中的 人员图像； 对各视角中的人员图像进行关联检 测， 并根据关联检测结果得到同一人员在不同视 角中的人员图像； 对同一人员在不同视角中的人 员图像分别进行物体检测， 并根据物体检测结果 确定该人员的异常物体携带信息。 上述方案， 通 过自动化检测的方式替代人工查看， 提高了物体 检测的效率。 同时， 避免了当同一时间进出仓库 的仓储人员较多时， 基于人工查看的方法可能出 现的物体检测结果不准确的情况， 提高了物体检 测结果的准确度。 并且， 无需投入大量人员进行 实时监控， 降低了人工成本 。 权利要求书2页 说明书11页 附图4页 CN 115359420 A 2022.11.18 CN 115359420 A 1.一种多视角的携物监控方法， 其特 征在于， 包括： 对各视角的监控图像分别进行 人员检测， 得到各视角中的人员图像； 对各视角中的人员图像进行关联检测， 并根据关联检测结果得到同一人员在不同视角 中的人员图像； 对同一人员在不同视角中的人员图像分别进行物体检测， 并根据物体检测结果确定该 人员的异常物体携带信息 。 2.根据权利要求1所述的方法， 其特征在于， 所述对各视角中的人员图像进行关联检 测， 并根据关联检测结果得到同一人员在不同视角中的人员图像， 包括： 针对每一视角， 分别对候选人员在该视角中的人员图像进行特征提取得到候选人员在 该视角中的表 观特征； 确定第一候选人员的表观特征与第 二候选人员的表观特征之间的相似度， 并根据 所述 相似度确定所述第一候选人员与所述第二候选人员是否为同一人员； 其中， 所述第一候选 人员与所述第二 候选人员为 不同视角中的候选人员。 3.根据权利要求2所述的方法， 其特征在于， 所述分别对候选人员在该视角中的人员图 像进行特征提取得到候选人员在该视角中的表 观特征之后， 还 包括： 将所述候选人员在该视角中的表 观特征存储于不定 长的表观特征池； 若在各视角的监控图像中均 未检测到所述候选人员的时长超过设定的时长 阈值， 则从 所述表观特征池中删除所述 候选人员的表 观特征。 4.根据权利要求1所述的方法， 其特征在于， 所述对同一人员在不同视角中的人员图像 分别进行物体 检测， 并根据物体 检测结果确定该 人员的异常物体携带信息， 包括： 分别对同一人员在不同视角中的人员图像进行物体检测， 得到物体检测结果和物体检 测结果的置信度； 根据所述物体检测结果和所述物体检测结果的置信度， 确定该人员的异常物体携带信 息。 5.根据权利要求4所述的方法， 其特征在于， 所述根据所述物体检测结果和所述物体检 测结果的置信度， 确定该 人员的异常物体携带信息， 包括： 根据所述物体检测结果的置信度， 对包括异常物体的物体检测结果进行筛选， 得到经 选择的至少两个物体 检测结果； 从所述至少两个物体 检测结果中分别获取异常物体 类型； 对所述异常物体 类型进行分类， 得到该 人员所携带的异常物体 类型。 6.根据权利要求5所述的方法， 其特征在于， 所述对所述异常物体类型进行分类， 得到 该人员所携带的异常物体 类型， 包括： 分别对各 所述异常物体 类型进行独热编码， 得到各类型编码信息； 对各类型编码信息进行拼接， 并将拼接结果输入分类模型， 且根据所述分类模型的输 出得到该人员所携带的异常物体 类型； 其中， 所述分类模型采用全连接网络构建。 7.一种多视角的携物监控 装置， 其特 征在于， 包括： 人员图像获取模块， 用于对各视角的监控图像分别进行人员 检测， 得到各视角中的人 员图像；权　利　要　求　书 1/2 页 2 CN 115359420 A 2关联检测确定模块， 用于对各视角中的人员图像进行关联检测， 并根据关联检测结果 得到同一人员在不同视角中的人员图像； 物体检测确定模块， 用于对 同一人员在不同视角中的人员图像分别进行物体检测， 并 根据物体 检测结果确定该 人员的异常物体携带信息 。 8.根据权利要求7 所述的装置， 其特 征在于， 所述关联检测 确定模块， 包括： 表观特征得到单元， 用于针对每一视角， 分别对候选人员在该视角中的人员图像进行 特征提取得到候选人员在该视角中的表 观特征； 同一人员确定单元， 用于确定第 一候选人员的表观特征与第 二候选人员的表观特征之 间的相似度， 并根据所述相似度确定所述第一候选人员与所述第二候选人员是否为同一人 员； 其中， 所述第一 候选人员与所述第二 候选人员为 不同视角中的候选人员。 9.一种电子设备， 其特 征在于， 包括： 一个或多个处 理器； 存储器， 用于存 储一个或多个程序； 当所述一个或多个程序被所述一个或多个处理器执行， 使得所述一个或多个处理器实 现如权利要求1 ‑6任一项所述的一种多视角的携物监控方法。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 该程序被处理器 执行时实现如权利要求1 ‑6任一项所述的一种多视角的携物监控方法。权　利　要　求　书 2/2 页 3 CN 115359420 A 3