(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210364716.4 (22)申请日 2022.04.08 (71)申请人 苏州浪潮智能科技有限公司 地址 215000 江苏省苏州市吴中经济开发 区郭巷街道官浦路1号9幢 (72)发明人 刘彬　 (74)专利代理 机构 北京连和连知识产权代理有 限公司 1 1278 专利代理师 刘小峰　张涛 (51)Int.Cl. G01N 21/88(2006.01) G01N 21/95(2006.01) G06V 10/26(2022.01) G06V 10/44(2022.01) G06V 10/75(2022.01)G06K 9/62(2022.01) (54)发明名称 基于机器视觉的弯针检测的方法、 系统、 存 储介质及设备 (57)摘要 本发明提供了一种基于机器视觉的弯针检 测的方法、 系统、 存储介质及设备， 方法包括： 根 据检测对象的探针槽的数量及其弯针的方向确 定至少一个拍照姿态及拍照光源定向； 基于至少 一个拍照姿态将相机和拍照光源移动到相应的 检测位置拍摄检测对象 的图像； 根据基于形状的 模板匹配获取图像中的探针槽的位置并进行图 像剪裁得到探针槽的模板匹配切割图； 使用语义 分割算法在模板匹配切割图中识别弯 针图像， 并 基于弯针图像计算相应弯针的轮廓； 根据轮廓求 取相应弯 针的方向， 并根据方向判断相应弯针的 缺陷情况。 优点在于只需要配置不同的参数， 可 以适应多种处理器型号的匹配； 缩减了人员成本 全自动化操作， 无需人工参与； 缩短检测时间， 大 大提高检测效率。 权利要求书2页 说明书9页 附图6页 CN 114813746 A 2022.07.29 CN 114813746 A 1.一种基于 机器视觉的弯针 检测的方法， 其特 征在于， 包括以下步骤： 根据检测对象的探针槽的数量及其弯针的方向确定至少一个拍照姿态及拍照光源定 向； 基于所述至少一个拍照姿态将相机和拍照光源移动到相应的检测位置拍摄检测对象 的图像； 根据基于形状的模板匹配获取所述图像中的探针槽的位置并进行图像剪裁得到所述 探针槽的模板匹配切割图； 使用语义分割算法在所述模板匹配切割图中识别弯针图像， 并基于所述弯针图像计算 相应弯针的轮廓； 根据所述轮廓求取相应弯针的方向， 并根据所述方向判断相应弯针的缺陷情况。 2.根据权利要求1所述的方法， 其特征在于， 所述根据检测对象的探针槽的数量及其弯 针的方向确定 至少一个拍照姿态及光源定向进一 步包括： 选用白色面 光源作为拍照光源； 将两个拍照光源相间隔地相对摆放且光源平面分别与检测对象所在的平面之间具有 取决于弯针方向的倾 斜角。 3.根据权利要求1或2所述的方法， 其特征在于， 所述基于所述至少一个拍照姿态将相 机和拍照光源移动到相应的检测位置拍摄 检测对象的图像进一 步包括： 将拍照光源与相机布置为保持相对静止， 使得移动相机的同时带动拍照光源移动； 使用三轴 模组将相机移动到相应的检测位置， 使得同时拍照 光源被调整到相应的照明 姿态。 4.根据权利要求1或2所述的方法， 其特征在于， 所述根据基于形状的模板匹配获取所 述图像中的探针槽的位置并进行图像剪 裁得到所述探针槽的模板匹配切割图进一 步包括： 响应于根据基于形状的模板匹配未获取所述图像中的探针槽的位置， 判断模板匹配失 败并结束检测过程和/或发出相关告警。 5.根据权利要求1或2所述的方法， 其特征在于， 所述使用语义分割算法在所述模板匹 配切割图中识别弯针图像， 并基于所述弯针图像 计算相应弯针的轮廓进一 步包括： 使用高分辨率语义分割的多路径细化网络进行所述模板匹配切割图中的弯针图像的 识别， 其中预 先执行包含图像路径、 缺陷位置的打标， 并基于此训练模型。 6.根据权利要求5所述的方法， 其特征在于， 所述使用语义分割算法在所述模板匹配切 割图中识别弯针图像， 并基于所述弯针图像 计算相应弯针的轮廓进一 步包括： 加载所述模型进行 所述弯针图像的识别， 并获得包 含初步筛 选的弯针的概 率缺陷图； 对所述概率缺陷图中的弯针图像利用连通 域分析获取相应的轮廓。 7.根据权利要求6所述的方法， 其特征在于， 所述根据所述轮廓求取相应弯针的方向， 并根据所述方向判断相应弯针的缺陷情况进一 步包括： 根据所述轮廓求取其几何图像的质心； 计算所述质心离周围轮廓的最大距离及轮廓上对应最大距离的点； 根据所述质心及最大距离的点获得 走向直线并计算所述 直线的方向； 根据所述 直线的方向判断相应的弯针是否为 缺陷弯针。 8.一种基于 机器视觉的弯针 检测的系统， 其特 征在于， 包括：权　利　要　求　书 1/2 页 2 CN 114813746 A 2检测姿态确定模块， 所述检测姿态确定模块配置为根据检测对象的探针槽的数量及其 弯针的方向确定 至少一个拍照姿态及拍照光源定向； 对象图像获取模块， 所述对象图像获取模块配置为基于所述至少一个拍照姿态将相机 和拍照光源移动到相应的检测位置拍摄 检测对象的图像； 模板匹配切割 模块， 所述模板匹配切割模块配置为根据基于形状的模板匹配获取所述 图像中的探针槽的位置并进行图像剪 裁得到所述探针槽的模板匹配切割图； 弯针图像识别模块， 所述缺陷弯针识别模块配置为使用语义分割算法在所述模板匹配 切割图中识别弯针图像， 并基于所述弯针图像 计算相应弯针的轮廓； 缺陷弯针判断模块， 所述缺陷弯针判断模块配置为根据所述轮廓求取相应弯针的方 向， 并根据所述方向判断相应弯针的缺陷情况。 9.一种计算机可读存储介质， 其特征在于， 存储有计算机程序指令， 所述计算机程序指 令被执行时实现如权利要求1 ‑7任意一项所述的基于 机器视觉的弯针 检测的方法。 10.一种计算机设备， 包括存储器和 处理器， 其特征在于， 所述存储器中存储有计算机 程序， 所述计算机程序被所述处理器执行时执行如权利要求1 ‑7任意一项所述的基于机器 视觉的弯针 检测的方法。权　利　要　求　书 2/2 页 3 CN 114813746 A 3