(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221086145 3.8 (22)申请日 2022.07.20 (71)申请人 杭州大森魔 岩科技有限公司 地址 311100 浙江省杭州市余杭区仓前街 道海创科技中心1幢6 03室 (72)发明人 杜瑞林　江勇　吴静　 (74)专利代理 机构 北京汇信合知识产权代理有 限公司 1 1335 专利代理师 卢亮辉 (51)Int.Cl. G06V 20/52(2022.01) G06V 40/10(2022.01) G06V 10/25(2022.01) G06V 10/82(2022.01) G01H 11/00(2006.01)G01H 17/00(2006.01) (54)发明名称 一种人员入侵振动波形自动标注方法、 装 置、 电子设备及存 储介质 (57)摘要 本发明公开了一种人员入侵振动波形自动 标注方法、 装置、 电子设备及存储介质， 包括获取 监控区域中的视频流数据， 并对视频流数据进行 处理获得监控图片； 将监控图片输入至预先构建 好的faster ‑RCNN模型中， 获取不 同类别带有标 签的入侵图片； 获取监控区域中的振动信号， 并 获取与带有标签的入侵图片 对应的波形数据， 并 将波形数据标注为对应的标签名； 基于波形数据 标注为对应的标签名， 将实时采集到的振动信号 中某段出现与标签名一样的波形数据时， 则将该 段自动标注。 本发明通过faster ‑RCNN模型实现 了对入侵波形自动标注。 权利要求书2页 说明书5页 附图1页 CN 115311616 A 2022.11.08 CN 115311616 A 1.一种人员入侵振动波形自动标注方法， 其特 征在于， 包括： 获取监控区域中的视频流数据， 并对所述视频流数据进行处 理获得监控图片； 将所述监控图片输入至预先构建好的faster ‑RCNN模型中， 获取不 同类别带有标签的 入侵图片； 获取监控区域中的振动信号， 并获取与所述带有标签的入侵 图片对应的波形数据， 并 将所述波形 数据标注为对应的标签名； 基于所述波形数据标注为对应的标签名， 将 实时采集到的振动信号中某段出现与 所述 标签名一样的波形 数据时， 则将该 段自动标注； 其中， 构建所述faster ‑RCNN模型包括： 将所述监控图片输入到特 征提取网络中， 进行 特征提取， 输出 特征图片； 将所述特征图片输入到RPN网络中， 并对所述特征图片中出现的入侵人或物生成建议 框； 将带有所述建议框 的特征图片输入至roi ‑pooling层， 并经过全连接层获得每张所述 特征图片上目标框的位置和分数； 对所述目标框的位置和分数按照类别进行循环遍历， 在每一类别中， 对分数低于0.7和 IOU大于0.3的所述目标框进行抑制， 对抑制处 理过后剩余的所述目标框打上 标签。 2.根据权利要求1所述的人员入侵振动波形自动标注方法， 其特征在于， 对所述视频流 数据进行处 理获得监控图片包括： 从所述视频流数据中逐帧抽取图片， 并对所述图片进行裁 剪、 缩放和归一 化处理。 3.一种人员入侵振动波形自动标注装置， 其特 征在于， 包括： 摄像模块， 用于获取监控区域中的视频流数据； 振动模块， 用于获取监控区域中的振动信号； 处理模块， 用于对所述视频流数据进行处理获得监控图片； 将所述监控图片输入至预 先构建好的faster ‑RCNN模型中， 获取不同类别带有 标签的入侵图片； 并获取与所述带有 标 签的入侵图片对应的波形 数据， 并将所述波形 数据标注为对应的标签名； 标注模块， 用于基于所述波形数据标注为对应的标签名， 将实时采集到的振动信号中 某段出现与所述标签名一样的波形 数据时， 则将该 段自动标注； 其中， 构建所述faster ‑RCNN模型包括： 将所述监控图片输入到特 征提取网络中， 进行 特征提取， 输出 特征图片； 将所述特征图片输入到RPN网络中， 并对所述特征图片中出现的入侵人或物生成建议 框； 将带有所述建议框 的特征图片输入至roi ‑pooling层， 并经过全连接层获得每张所述 特征图片上目标框的位置和分数； 对所述目标框的位置和分数按照类别进行循环遍历， 在每一类别中， 对分数低于0.7和 IOU大于0.3的所述目标框进行抑制， 对抑制处 理过后剩余的所述目标框打上 标签。 4.根据权利要求3所述的人员入侵振动波形自动标注装置， 其特征在于， 对所述视频流 数据进行处 理获得监控图片包括： 从所述视频流数据中逐帧抽取图片， 并对所述图片进行裁 剪、 缩放和归一 化处理。 5.根据权利要求4所述的人员入侵振动波形自动标注装置， 其特征在于， 所述振动模块权　利　要　求　书 1/2 页 2 CN 115311616 A 2为模拟振动传感器或数字振动传感器。 6.一种电子设备， 其特征在于， 包括至少一个处理单元以及至少一个存储单元， 其中， 所述存储单元存储有计算机程序， 当所述程序被所述处理单元执行时， 使得所述处理单元 执行权利要求1～ 2任一权利要求所述的方法。 7.一种存储介质， 其特征在于， 其存储有可由电子设备执行的计算机程序， 当所述程序 在所述电子设备上运行时， 使得所述电子设备执行权利要求1～2任一权利要求所述的方 法。权　利　要　求　书 2/2 页 3 CN 115311616 A 3