(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210288569.7 (22)申请日 2022.03.23 (71)申请人 合肥工业大 学 地址 230009 安徽省合肥市包河区屯溪路 193号 (72)发明人 赵冲　陈逸康　卫星　何煦　 董浩杰　杨帆　黄晨　崔元迪　 王申　李宝璐　杨奕在　 (74)专利代理 机构 合肥天明专利事务所(普通 合伙) 34115 专利代理师 汪贵艳 (51)Int.Cl. G06T 7/00(2017.01) G06N 3/08(2006.01) G06N 3/04(2006.01)H04L 67/01(2022.01) H04L 67/1001(2022.01) H04L 67/133(2022.01) G06V 10/44(2022.01) G06V 10/82(2022.01) (54)发明名称 一种工业流水作业产品的缺陷检测方法和 系统、 存储介质 (57)摘要 本发明公开了产品缺陷检测领域的一种工 业流水作业产品的缺陷检测方法和系统、 存储介 质， 方法包 括步骤如下： S100： 以流水线作为客户 端， 客户端与服务端之间利用分布式流处理方法 进行实时通信以及数据处理； S200： 采集流水线 上产品的图像， 结合客户端返回的信息， 顺序调 用检测算法提取产品图像中的特征进行检测识 别； S300： 根据检测识别结果， 在可视自更新界面 上实时显示产品信息。 本发明不仅提高了流水线 产品生产的效率， 而且将数据资源转化为知 识资 产用于产品缺陷检测， 降低了监管、 运维的成本， 集成了多个系统模块， 提高了系统模块的重用 性， 增强了对产品缺陷检测的准确性和灵活性。 权利要求书2页 说明书5页 附图2页 CN 114693623 A 2022.07.01 CN 114693623 A 1.一种工业 流水作业产品的缺陷检测方法， 其特 征在于， 方法包括 步骤如下： S100： 以流水线作为客户端， 客户端与服务端之间利用分布式流处理方法进行实时通 信以及数据处 理； S200： 采集流水线上产品的图像， 结合客户端返回的信息， 顺序调用检测算法提取产品 图像中的特 征进行检测识别； S300： 根据检测识别结果， 在可视自更新界面上实时显示产品信息 。 2.根据权利要求1所述的缺陷检测方法， 其特征在于， S100中所述分布式流处理方法包 括如下步骤： S110： 以RPC远程调用方式， 建立基于 网络通信协议的客户端与 服务端的数据分析服务 调用， 通过运行异步RPC服 务建立异步的分布式系统通信； S120： 多个客户端提供的请求消息序列化之后发送到RPC服务端， 基于负载平衡策略， RPC服务端以交叉分配的方式将请求 发送到多个服务端， 服务端获得请求并返回消息响应， 客户端接收返回的消息序列。 : 3.根据权利要求2所述的缺陷检测方法， 其特征在于， S110中建立分布式系统通信的方 法为选择双向流式RPC作为接口， 服务端根据客户端发送的具体消息序列决定响应信息的 顺序， 通过提供到指定主机和端口号的RPC服务器的连接建立RPC通道， 实现多个服务端与 客户端之间的通信。 4.根据权利要求2所述的缺陷检测方法， 其特征在于， S120中服务端获得请求并返回消 息响应、 客户端接收返回的消息序列的方法包括如下步骤： S121： 服务端通过序列化结构数据的方法反序列化到达的请求， 恢复为内存中的表达 方式后， 执 行客户端请求的服 务； S122： 服务端通过序列化结构数据的方法序列化 服务的返回值并发送给客户端； S123： 客户端通过反序列化结构数据的方法反序列化服务端返回的请求， 恢复为内存 中的表达方式后， 继续进行 下一轮消息序列的发送。 5.根据权利要求1所述的缺陷检测方法， 其特征在于， S200中流水线中产品图像的采集 频率函数为： num＝total/velocity， 其中num为单位时间内图像采集的频率， total为单位 时间内流水线传送带输送的产品总数， vel ocity为流水线传送带的输送速度。 6.根据权利要求1所述的缺陷检测方法， 其特征在于， S200中顺序调用检测算法提取产 品图像中的特 征进行检测识别的方法包括如下步骤： S210： 针对多个缺陷种类， 预先提供足量的样品数据， 通过深度学习集训分别构 建神经 网络， 利用神经网络顺序对流水线产品的图像进行检测识别； S220： 从图像中提取特征， 并分别与各缺陷种类的样品的缺陷特征进行拟合计算， 根据 匹配程度得到各个缺陷特 征下的缺陷拟合度； S230： 将各个缺陷拟合度与预设的拟合度阈值进行比较， 根据比较结果判断产品是否 为优质产品： 若是， 则继续进行 下一轮检测,将优质产品信息序列返回； 若否， 则将劣质产品信息序列返回， 进行 下一轮检测。 7.根据权利要求1所述的缺陷检测方法， 其特征在于， 所述可视自更新界面上显示的产 品信息包括已完成检测的产品总 数量、 与已知缺陷种类匹配的的劣质产品总 数量、 无缺陷权　利　要　求　书 1/2 页 2 CN 114693623 A 2的优质产品总数量。 8.一种工业流水作业产品的缺陷检测系统， 其特征在于， 包括分布式任务分配模块、 图 像模块、 缺陷检测模块以及界面显示模块； 所述分布式任务分配模块用于利用分布式流处理方法进行服务端与客户端的实时通 信及数据处 理； 所述图像模块至少设有一个， 安装在所述 流水线上采集产品的图像； 所述缺陷检测模块用于结合客户端返回的信 息与采集的流水线中产品的图像， 调取检 测算法提取产品图像中的特 征进行检测识别； 所述界面显示模块用于根据检测识别结果实时显示产品信息 。 9.一种工业流水作业产品的缺陷检测存储介质， 其特征在于， 包括计算机可执行指令， 所述可执行指令被执 行时用于实现权利要求1～8中任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114693623 A 3