(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211126801.3 (22)申请日 2022.09.15 (71)申请人 广联达科技股份有限公司 地址 100193 北京市海淀区西北旺东路10 号院东区13号楼 (72)发明人 白玲　孔爱祥　 (74)专利代理 机构 北京英特普罗知识产权代理 有限公司 1 1015 专利代理师 邵煜程 (51)Int.Cl. G06V 20/52(2022.01) G06V 20/40(2022.01) G06T 7/70(2017.01) G06T 7/246(2017.01) (54)发明名称 一种基于行人检测的建库方法、 装置、 设备 及存储介质 (57)摘要 本发明公开了一种基于行人检测的建库方 法、 装置、 设备及存储介质， 该方法包括： 获取目 标摄像头的监控视频， 并按照预设帧数从所述监 控视频中截 取出多个检测图片帧； 依次从每个检 测图片帧中确定出行人检测框， 并将所有检测图 片帧中属于同一行人的行人检测框聚类为一行 人组； 其中， 所述行人检测框用于表征行人在检 测图片帧中的实际位置； 判断在预设的行人库中 是否存在与所述行人组相匹配的行人文件； 其 中， 所述行人库中的各个行人文件 是基于其他摄 像头的监控视频得到的； 若是， 则将所述行人组 存储到相匹配的行人文件中， 若否， 则将所述行 人组存储到所述行人库中新建的行人文件中； 本 发明能够基 于对行人的检测进行自动建库。 权利要求书2页 说明书11页 附图3页 CN 115393801 A 2022.11.25 CN 115393801 A 1.一种基于行 人检测的建库方法， 其特 征在于， 所述方法包括： 获取目标摄像头的监控视频， 并按照预设 帧数从所述监控视频中截取出多个检测图片 帧； 依次从每个检测图片帧中确定出行人检测框， 并将所有检测图片帧中属于同一行人的 行人检测框聚类为一行人组； 其中， 所述行人检测框用于表征行人在检测图片帧中的实际 位置； 判断在预设的行人库中是否存在与所述行人组相匹配的行人文件； 其中， 所述行人库 中的各个行 人文件是基于其 他摄像头的监控视频 得到的； 若是， 则将所述行人组存储到相匹配的行人文件中， 若否， 则将所述行人组存储到所述 行人库中新建的行 人文件中。 2.根据权利要求1所述的基于行人检测的建库 方法， 其特征在于， 所述依次从每个检测 图片帧中确定出行人检测框， 并将所有检测图片帧中属于同一行人的行人检测框聚类为一 行人组， 包括： 从截取的所有检测图片帧中获取相邻 两张检测图片帧， 并确定所述相邻 两张检测图片 帧的监控时间； 从所述相邻两张检测图片帧中监控时间靠前的检测图片帧中确定出用于标识行人的 第一检测框， 并基于所述第一检测框进 行行人预测以得到预测框； 其中， 所述预测框用于表 征出现在所述目标图像帧的前一图像帧中的行 人在所述目标图像帧中的预测位置； 从所述相邻两张检测图片帧中监控时间靠后的检测图片帧中确定出第二检测框； 计算所述预测框和所述第二检测框的余弦距离， 并基于所述 余弦距离得到代价矩阵； 将所述代价矩阵输入匈 牙利匹配算法中以得到相匹配的预测框和第二检测框； 计算所述相匹配的预测框和第二检测框的中心距离是否小于预设距离， 若是， 则确认 所述第一检测框和所述第二检测框为同一目标行人并将所述第一检测框和所述第二检测 框添加至同一行 人组。 3.根据权利要求1所述的基于行人检测的建库 方法， 其特征在于， 所述判断在预设的行 人库中是否存在与所述行 人组相匹配的行 人文件， 包括： 根据所述行 人组中行 人检测框的特 征向量计算出 所述行人组的平均特 征向量； 判断在行 人库中是否存在与所述行 人组的平均特 征向量相匹配的综合特 征向量； 若是， 则所述行人库中存在与 所述行人组相匹配的行人文件， 若否， 则为所述行人组创 建行人文件。 4.根据权利要求3所述的基于行人检测的建库 方法， 其特征在于， 所述判断在行人库中 是否存在与所述行 人组的平均特 征向量相匹配的综合特 征向量， 包括： 当所述平均 特征向量与所述综合特征向量的余弦距离大于等于预设距离阈值 时， 获取 所述综合特征向量对应的行人文件， 并将所述行人文件对应的行人ID添加在所述行人组的 行人检测框中； 当所述平均 特征向量与所述综合特征向量的余弦距离小于预设距离 阈值时， 为所述行 人组创建行 人文件以及行 人ID， 并将所述行 人ID添加在所述行 人组的行 人检测框中。 5.根据权利要求3所述的基于行人检测的建库 方法， 其特征在于， 所述将所述行人组存 储到相匹配的行 人文件中， 包括：权　利　要　求　书 1/2 页 2 CN 115393801 A 2将所述行人组中的行人检测框和所述行人检测框的特征向量存储至相匹配的行人文 件中； 计算所述行人文件中的所有行人检测框的特征向量的平均值， 并将计算结果作为所述 行人文件的综合特 征向量。 6.根据权利要求5所述的基于行人检测的建库 方法， 其特征在于， 在所述将所述行人组 存储到相匹配的行 人文件中之后， 包括： 当监测到向所述行人文件中存储所述行人检测框时， 确定所述行人检测框的监控时 间； 获取与所述行人检测框对应的监控视频并确定所述监控视频数据对应的目标摄像头 和目标摄 像头位置； 将所述行人检测框的监控时间、 目标摄像头和目标摄像头位置关联的添加至所述行人 文件中。 7.一种基于行 人检测的建库装置， 其特 征在于， 所述装置包括： 截取模块， 用于获取目标摄像头的监控视频， 并按照预设帧数从所述监控视频中截取 出多个检测图片帧； 聚类模块， 用于依次从每个检测图片帧中确定出行人检测框， 并将所有检测图片帧中 属于同一行人 的行人检测框聚类为一行人组； 其中， 所述行人检测框用于表征行人在检测 图片帧中的实际位置； 判断模块， 用于判断在预设的行人库中是否存在与所述行人组相匹配的行人文件； 其 中， 所述行 人库中的各个行 人文件是基于其 他摄像头的监控视频 得到的； 存储模块， 用于若是， 则将所述行人组存储到相匹配的行人文件中， 若否， 则将所述行 人组存储到所述行 人库中新建的行 人文件中。 8.根据权利要求7 所述的基于行 人检测的建库装置， 其特 征在于， 所述装置还 包括： 框取模块， 用于将所述行人组中的行人检测框和所述行人检测框的特征向量存储至相 匹配的行 人文件中； 计算模块， 用于计算所述行人文件中的所有行人检测框的特征向量的平均值， 并将计 算结果作为所述行 人文件的综合特 征向量。 9.一种计算机设备， 所述计算机设备包括： 存储器、 处理器以及存储在所述存储器上并 可在所述处理器上运行 的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时实 现权利要求1至 6中任一项所述方法的步骤。 10.一种计算机存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序被处 理器执行时实现权利要求1至 6中任一项所述方法的步骤。权　利　要　求　书 2/2 页 3 CN 115393801 A 3