(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210614363.9 (22)申请日 2022.05.31 (71)申请人 浙江大华 技术股份有限公司 地址 310053 浙江省杭州市滨江区滨安路 1187号 (72)发明人 朱亚伦　沈孔怀　 (74)专利代理 机构 北京同达信恒知识产权代理 有限公司 1 1291 专利代理师 赵凯莉 (51)Int.Cl. G06V 20/62(2022.01) G06V 10/56(2022.01) G06V 10/44(2022.01) G06V 10/82(2022.01) G06V 10/764(2022.01)G06V 30/244(2022.01) G06V 30/19(2022.01) G06V 20/70(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种图像识别的方法及设备 (57)摘要 本发明公开了一种图像识别的方法及设备， 用于实现一种更加通用的车牌识别方法， 在支持 国标车牌基础上支持识别各种定制车牌， 减少开 发工作量和开发周 期。 该方法包括： 确定待识别 的图像和所述图像中对象 的外部特征； 将所述图 像输入到训练好的识别模型中， 利用主干网络提 取所述图像的特征得到特征图， 将所述特征图分 别输入到第一分支网络和第二分支网络， 对应输 出第一预测结果和第二预测结果； 其中所述识别 模型包括所述主干网络、 所述第一分支网络和所 述第二分支网络； 根据所述对象的外部特征、 所 述第一预测结果和第二预测结果， 确定所述对象 的识别结果。 权利要求书2页 说明书14页 附图4页 CN 115019293 A 2022.09.06 CN 115019293 A 1.一种图像识别的方法， 其特 征在于， 该 方法包括： 确定待识别的图像和所述图像中对象的外 部特征； 将所述图像输入到训练好的识别模型中， 利用主干网络提取所述图像的特征得到特征 图， 将所述特征图分别输入到第一分支网络和第二分支网络， 对应输出第一预测结果和第 二预测结果； 其中所述识别模型包括所述主干网络、 所述第一分支网络和所述第二分支网 络； 根据所述对象的外部特征、 所述第一预测结果和第二预测结果， 确定所述对象的识别 结果。 2.根据权利要求1所述的方法， 其特征在于， 通过如下方式确定所述识别模型训练完 成： 获取标注的第一训练集和标注的第二训练集； 将所述第一训练集经过主干网络输入到第一分支网络， 计算第一损 失值， 以及将所述 第二训练集经 过主干网络 输入到第二分支网络， 计算第二损失值； 分别利用所述第一损 失值和所述第二损 失值， 对所述识别模型进行交替训练， 当所述 第一损失值和所述第二损失值都满足预设条件时， 确定所述识别模型训练完成。 3.根据权利要求2所述的方法， 其特 征在于， 通过如下 方式确定所述第二训练集： 获取标注 的真实图像， 利用生成的至少一个第一字符， 对所述真实图像中的至少一个 第二字符进行替换， 得到合成图像； 根据进行替换的至少一个第一字符标注的标签， 对所述 合成图像进行 标注； 根据标注的合成图像， 确定第二训练集。 4.根据权利要求1所述的方法， 其特征在于， 所述根据所述对象的外部特征、 所述第一 预测结果和第二预测结果， 确定所述对象的识别结果， 包括： 当所述对象的外部特征满足第 一预设特征时， 根据 所述第一预测结果确定所述对象的 识别结果， 其中所述第一预设特征是根据所述第一训练集的图像中对象的外部特征确定 的； 或， 当所述对象的外部特征满足第 二预设特征时， 根据 所述第二预测结果确定所述对象的 识别结果， 其中所述第二预设特征是根据所述第二训练集的图像中对象的外部特征确定 的。 5.根据权利要求4所述的方法， 其特征在于， 所述当所述对象的外部特征满足第 一预设 特征时， 根据所述第一预测结果确定所述对象的识别结果， 包括： 确定与所述第一预设特 征对应的第一字符规则； 当所述第一预测结果符合所述第 一字符规则时， 根据所述第 一预测结果确定所述对象 的识别结果。 6.根据权利要求4所述的方法， 其特征在于， 所述当所述对象的外部特征满足第 二预设 特征时， 根据所述第二预测结果确定所述对象的识别结果， 包括： 确定与所述第二预设特 征对应的第二字符规则； 当所述第二预测结果符合所述第 二字符规则时， 根据所述第 二预测结果确定所述对象 的识别结果。 7.根据权利要求6所述的方法， 其特征在于， 当所述第 二预测结果不符合所述第 二字符权　利　要　求　书 1/2 页 2 CN 115019293 A 2规则时， 还 包括： 确定与所述第一预设特 征对应的第一字符规则； 当所述第二预测结果符合所述第 一字符规则时， 根据所述第 二预测结果确定所述对象 的识别结果。 8.根据权利要求1～7任一所述的方法， 其特 征在于， 所述第一预测结果包括至少一个置信度大于第一阈值的第一预测标签； 和/或， 所述第二预测结果包括至少一个置信度大于第二阈值的第二预测标签。 9.一种图像识别的设备， 其特征在于， 该设备包括处理器和存储器， 所述存储器用于存 储所述处理器可执行 的程序， 所述处理器用于读取所述存储器中的程序并执行权利要求1 ～8任一所述方法的步骤。 10.一种计算机存储介质， 其上存储有计算机程序， 其特征在于， 该程序被处理器执行 时实现如权利要求1～8任一所述方法的步骤。权　利　要　求　书 2/2 页 3 CN 115019293 A 3