(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210623349.5 (22)申请日 2022.06.01 (71)申请人 河南讯飞人工智能科技有限公司 地址 450002 河南省郑州市金 水区宝瑞路 115号河南省信息安全产业 示范园4号 (72)发明人 闫润强　宋季锟　邓柯珀　蒋茁　 (74)专利代理 机构 北京路浩知识产权代理有限 公司 11002 专利代理师 吕伟盼 (51)Int.Cl. G06V 10/40(2022.01) G06V 10/26(2022.01) G06V 10/74(2022.01) G06V 10/764(2022.01) G06V 10/774(2022.01)G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 图像识别方法、 装置、 电子设备及存 储介质 (57)摘要 本发明提供一种图像识别方法、 装置、 电子 设备及存储介质， 其中方法包括： 确定待识别图 像； 基于特征提取网络， 对待识别图像进行特征 提取， 得到待识别图像的图像特征， 特征提取网 络是基于携带目标类别标签和目标分割标签的 第一样本图像， 联合初始语义分割网络训练得到 的， 初始语义分割网络基于特征提取网络提取的 特征进行语义分割； 基于图像特征， 确定待识别 图像的识别结果， 本发明提供的方法、 装置、 电子 设备及存储介质， 实现了在特征提取网络在训练 过程中能够更多地学习到目标区域的特征信息， 减少了对背景信息的误学习， 提高了特征提取网 络对目标区域特征提取的准确度， 进而提高了目 标区域分类识别的准确度。 权利要求书2页 说明书11页 附图5页 CN 115019052 A 2022.09.06 CN 115019052 A 1.一种图像识别方法， 其特 征在于， 包括： 确定待识别图像； 基于特征提取网络， 对所述待识别图像进行特征提取， 得到所述待识别图像的图像特 征， 所述特征提取网络是基于携带目标类别标签和目标分割 标签的第一样本图像， 联合初 始语义分割网络训练得到的， 所述初始语义分割网络基于所述特征提取网络提取的特征进 行语义分割； 基于所述图像特 征， 确定所述待识别图像的识别结果。 2.根据权利要求1所述的图像识别方法， 其特征在于， 所述特征提取网络的训练步骤包 括： 基于初始特 征提取网络， 确定所述第一样本图像的初始特 征； 基于相同目标类别下的所述第 一样本图像的初始特征之间的相似度， 和/或， 不同目标 类别下的所述第一样本图像的初始特 征之间的相似度， 确定第一损失； 基于所述初始语义分割网络和所述目标分割标签， 确定第二损失； 基于所述第 一损失， 对所述初始特征提取网络进行参数迭代， 基于所述第 二损失， 对所 述初始特 征提取网络和所述初始语义分割网络进行参数迭代， 得到所述特 征提取网络 。 3.根据权利要求2所述的图像识别方法， 其特征在于， 所述基于相同目标类别下的所述 第一样本图像的初始特征之 间的相似度， 和/或， 不同目标类别下的所述第一样本图像的初 始特征之间的相似度， 确定第一损失， 包括： 基于所述第一样本图像， 确定多批次的样本图像； 基于当前批次的样本图像的初始特征和所述当前批次的样本图像对应目标类别标签， 以及所述当前批次之前批次的样本图像的初始特征和所述当前批次之前批次的样本图像 对应的目标类别标签， 构建第一正负样本对和第二正负样本对， 所述第一正负样本对中的 两个图像均来自所述当前批次， 所述第二正负样本对中一个样本图像来自所述当前批次， 另一个样本图像来自所述当前批次之前的批次； 基于所述第一 正负样本对和所述第二 正负样本对的相似度， 确定所述第一损失。 4.根据权利要求3所述的图像识别方法， 其特征在于， 所述第二正负样本对构建步骤， 包括： 基于所述当前批次的样本图像的初始特征之间的相似度， 以及所述当前批次之前批次 中同一批次的样本图像的初始特 征之间的相似度， 确定采样比例； 基于所述当前批次的样本图像的初始特征和所述述当前批次之前批次的样本图像的 初始特征， 以及采样比例， 构建所述第二 正负样本对。 5.根据权利要求1至4中任一项所述的图像识别方法， 其特征在于， 所述确定待识别图 像， 包括： 获取原始图像， 并对所述原始图像进行目标区域检测， 将所述原始图像中的目标区域 作为所述待识别图像。 6.根据权利要求1至4中任一项所述的图像识别方法， 其特征在于， 所述基于所述图像 特征， 确定所述待识别图像的识别结果， 包括： 基于所述图像特征与目标类别对应的第 二样本图像的样本图像特征之间的相似度， 确 定所述待识别图像的识别结果。权　利　要　求　书 1/2 页 2 CN 115019052 A 27.根据权利要求6所述的图像识别方法， 其特征在于， 所述第 二样本图像包括同一目标 类别下不同拍摄角度拍摄得到的图像。 8.一种图像识别装置， 其特 征在于， 包括： 确定模块， 用于确定待识别图像； 提取模块， 用于基于特征提取网络， 对所述待识别图像进行特征提取， 得到所述待识别 图像的图像特征， 所述特征提取网络是基于携带目标类别标签和目标分割标签的第一样本 图像， 联合初始语义分割网络训练得到的， 所述初始语义分割网络基于所述特征提取网络 提取的特 征进行语义分割； 识别模块， 用于基于所述图像特 征， 确定所述待识别图像的识别结果。 9.一种电子设备， 包括存储器、 处理器及存储在所述存储器上并可在所述处理器上运 行的计算机程序， 其特征在于， 所述处理器执行所述程序时实现如权利要求1至7任一项所 述图像识别方法。 10.一种非暂态计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算 机程序被处 理器执行时实现如权利要求1至7任一项所述图像识别方法。权　利　要　求　书 2/2 页 3 CN 115019052 A 3