(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211167656.3 (22)申请日 2022.09.23 (71)申请人 中冶赛迪信息技 术 （重庆） 有限公司 地址 401329 重庆市九龙坡区白市驿镇农 科大道66号2幢5-6号 (72)发明人 谭凌　张晓辉　黄建斌　刘竞升　 刘睿　庞殊杨　宋嘉铭　 (74)专利代理 机构 上海光华专利事务所(普通 合伙) 31219 专利代理师 唐勇 (51)Int.Cl. G06V 10/764(2022.01) G06V 10/774(2022.01) G06V 10/25(2022.01) G06V 10/30(2022.01)G08B 21/18(2006.01) (54)发明名称 一种打包线乱线报警方法、 装置、 设备及存 储介质 (57)摘要 本发明提供一种打包线乱线报警方法、 装 置、 设备及存储介质， 该方法通过获取目标打包 工位的目标环 境图像； 将目标环 境图像输入打包 特征标注模 型， 得到打包线 标识和打包工位标志 位标识， 训练打包特征标注模型需获取目标打包 工位初始环 境图像； 将初始环 境图像的色彩通道 相互转换， 以生成转换环境图像； 将初始环境图 像和转换环 境图像确定为样本图像并标注， 生成 样本数据集； 并将训练后的模型确定为打包特征 标注模型； 基于打包线 标识的打包线标识数量和 打包工位标志位标识的打包工位标志位标识数 量确定目标打包工位的打包线状态并发出报警 信息； 本发明涉及的图像采集、 图像处理， 均通过 机器设备完成， 提升了判断的准确性， 且有效降 低了人力成本 。 权利要求书2页 说明书10页 附图3页 CN 115482416 A 2022.12.16 CN 115482416 A 1.一种打包线乱线报警方法， 其特 征在于， 所述方法包括： 获取目标打包工位的目标环境图像； 将所述目标环境图像输入至打包特征标注模型， 得到打包线标识和打包工位标志位标 识， 所述打包特征标注模型的训练方式包括， 获取所述目标打包工位的初始环 境图像， 所述 初始环境图像包括红绿蓝三原色色彩通道； 将所述红绿蓝三原色色彩通道相互转换， 包括 将红色色彩通道的亮度值与蓝色色彩通道亮度值互换， 以生成转换环境图像； 将所述初始 环境图像和所述转换环境图像确定为样本图像， 对所述样本图像中的打包线 特征和打包工 位标志位特征进行标注， 以生成样本数据集； 基于所述样本数据集对初始标注模型进行训 练， 将训练后的初始标注模型确定为打包特 征标注模型； 基于所述打包线标识的打包线标识数量和所述打包工位标志位标识的打包工位标志 位标识数量确定所述目标打包工位的打包线状态； 当所述目标打包工位的打包线状态为乱线状态， 发出报警信息 。 2.根据权利要求1所述的打包线乱线报 警方法， 其特征在于， 所述特征标注模型的训练 过程中， 获取 所述目标打包工位的初始 环境图像还 包括： 基于所述目标打包工位的初始 环境图像， 确定所述初始 环境图像的感兴趣区域； 将所述初始环境图像中感兴趣区域以外的区域确定为非感兴趣区域， 并对所述非感兴 趣区域进行 过滤。 3.根据权利要求1所述的打包线乱线报 警方法， 其特征在于， 对所述样本图像中的打包 线特征和打包工位标志位特 征进行标注包括： 通过矩形框对所述样本图像中的打包线特征和打包工位标志位特征进行旋转标注， 所 述矩形框包括非标准矩形框； 通过最小外 接矩形将所述非标准矩形框修 正为标准矩形框； 基于环形平滑标签方法消除边界处异常角度损失值， 以得到所述打包特征标注模型的 角度预测结果； 基于所述角度预测结果在预设的角度范围内检测具有旋转属性的打包线和打包工位 标志位， 以得到打包线特 征标注框和打包工位标志位特 征标注框。 4.根据权利要求1 ‑3任一项所述的打包线乱线报 警方法， 其特征在于， 基于所述打包线 标识的打包线标识数量和所述打包工位标志位标识的打包工位标志位标识数量确定所述 目标打包工位的打包线状态之后还 包括： 若所述目标打包工位的打包线状态为乱线状态， 则判定打包机的上料状态为上料异 常， 所述上 料机的上 料异常状态包括打包线缺失状态和打包线缠绕状态； 所述打包机设置于所述目标打包工位， 并用于利用打包线打包产品， 所述打包工位标 志位设置 于所述打包机或所述目标打包工位。 5.根据权利要求4所述的打包线乱线报 警方法， 其特征在于， 判定打包机上料状态为上 料异常包括： 基于打包线标识确定各打包线的位置， 若存在至少两根打包线的位置交叉， 则判定所 述上料异常状态为打包线缠绕状态； 若任意打包线的位置之间不交叉， 则判定所述上 料异常状态为打包线缺失状态。 6.根据权利要求1 ‑3任一项所述的打包线乱线报 警方法， 其特征在于， 将所述目标环境权　利　要　求　书 1/2 页 2 CN 115482416 A 2图像输入至所述打包特 征标注模型， 得到打包工位标识和打包工位标志位标识包括： 将所述目标环境图像输入至所述打包特征标注模型， 识别所述目标环境图像中的打包 工位标志位特 征和打包线特 征， 得到打包线标注框和打包工位标志位标注框； 将所述打包线标注框确定为打包线标识， 将所述打包工位标志位标注框确定为打包工 位标志位标识。 7.根据权利要求1 ‑3任一项所述的打包线乱线报 警方法， 其特征在于， 基于所述打包线 标识的打包线标识数量和所述打包工位标志位标识的打包工位标志位标识数量确定所述 目标打包工位的打包线状态包括： 基于所述打包线标识和所述打包工位标志位标识， 确定所述打包线标识数量和所述打 包工位标志位标识数量； 若所述打包线标识数量等于所述打包工位标志位标识数量， 则判定所述目标打包工位 的打包线状态为 正常状态； 若所述打包线标识数量小于所述打包工位标志位标识数量， 则判定所述目标打包工位 的打包线状态为乱线状态。 8.根据权利要求1 ‑3任一项所述的打包线乱线报 警方法， 其特征在于， 基于所述乱线状 态发出报警信息包括： 获取多帧所述目标工位的环境图像， 并检测所述多帧所述目标工位的打包线状态； 当检测到所述多帧所述目标工位的打包线状态为乱线状态， 则确定所述多帧所述目标 工位的打包线状态为乱线状态的乱线帧数； 若所述乱线帧数 大于或等于预设的安全帧数阈值， 则发出报警信息 。 9.一种打包线乱线报警装置， 其特 征在于， 包括： 图像获取模块， 用于获取目标打包工位的目标环境图像； 标识确定模块， 用于将所述目标环境图像输入至所述打包特征标注模型， 得到打包线 标识和打包工位标志位标识； 状态确定模块， 用于基于所述打包线标识的打包线标识数量和所述打包工位标志位标 识的打包工位标志位标识数量确定所述目标打包工位的打包线状态； 报警模块， 用于当所述目标打包工位的打包线状态为乱线状态， 发出报警信息 。 10.一种电子设备， 其特 征在于， 所述电子设备包括： 一个或多个处 理器； 存储装置， 用于存储一个或多个程序， 当所述一个或多个程序被所述一个或多个处理 器执行时， 使得 所述电子设备实现如权利要求1至8中任一项所述的打包线乱线报警方法。 11.一种计算机可读存储介质， 其特征在于， 其上存储有计算机程序， 当所述计算机程 序被计算机的处理器执行时， 使计算机执行权利要求 1至8中任一项 所述的打包线乱线报警 方法。权　利　要　求　书 2/2 页 3 CN 115482416 A 3