(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210319705.4 (22)申请日 2022.03.29 (71)申请人 深圳市海清视讯科技有限公司 地址 518000 广东省深圳市宝安区西乡街 道固戍开发区泰华梧桐工业园8号建 筑3层 (72)发明人 周波　蔡芳发　苗瑞　邹小刚　 梁书玉　 (74)专利代理 机构 北京同立钧成知识产权代理 有限公司 1 1205 专利代理师 唐强　刘芳 (51)Int.Cl. G06V 20/68(2022.01) G06V 10/44(2022.01) G06V 10/774(2022.01)G06V 10/764(2022.01) G06K 9/62(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) (54)发明名称 食物检测方法和相关 设备 (57)摘要 本发明提供一种食物检测方法和相关设备， 该方法包括： 将待检测的第一食物图像输入至识 别模型， 其中， 识别模型的训练包括食物识别任 务的第一梯度值的训练以及食物新鲜度识别任 务的第二梯度值的训练， 且第一梯度值以及第二 梯度值在训练过程中满足梯度归一化条件； 根据 识别模型的输出结果， 确定第一食物图像中食物 以及食物的新鲜度。 本发明中， 识别模型的训练 包括食物识别任务的第一梯度值的训练以及食 物新鲜度识别任务的第二梯度值的训练， 且第一 梯度值以及第二梯度值在训练过程中满足梯度 归一化条件， 防止模型偏重梯度较大的任务进行 训练， 从而避免偏重对食物类别或者食物新鲜度 的训练， 提高了模型对食物类别以及新鲜度的识 别精度。 权利要求书2页 说明书7页 附图4页 CN 114743193 A 2022.07.12 CN 114743193 A 1.一种食物检测方法， 其特 征在于， 包括： 将待检测的第一食物图像输入至识别模型， 其中， 所述识别模型的训练包括食物识别 任务的第一梯度值的训练以及 食物新鲜度识别任务的第二梯度值的训练， 且所述第一梯度 值以及所述第二梯度值在训练过程中满足梯度归一 化条件； 根据所述识别模型的输出结果， 确定所述第一食物图像中食物以及所述食物的新鲜 度。 2.根据权利要求1所述的食物检测方法， 其特征在于， 所述将待检测的食物图像输入至 识别模型的步骤之前， 还 包括： 获取各张训练图像， 所述训练图像包括食物标签以及食物新鲜度标签； 根据各张所述训练图像的食物标签以及食物新鲜度标签， 对多任务模型的第 一梯度值 以及第二梯度值进行多轮训练， 得到识别模型， 其中， 每一轮的所述第一梯度值、 所述第一 梯度值对应的第一训练权重、 所述第二梯度值以及所述第二梯度值对应的第二训练权重满 足梯度归一 化条件。 3.根据权利要求2所述的食物检测方法， 其特征在于， 所述获取各张训练图像的步骤包 括： 获取各张第二食物图像； 对各张所述第二食物图像进行数据增强处理， 得到各张第三食物图像， 所述增强处理 包括对比度变换、 灰度变化和/或尺度变换； 对每张所述第三食物图像添加食物标签以及食物新鲜度标签， 得到各张所述训练图 像。 4.根据权利要求2所述的食物检测方法， 其特征在于， 所述根据 各张所述训练图像的食 物标签以及食物新鲜度标签， 对多任务模型 的第一梯度值以及第二梯度值进行多轮训练， 得到识别模型的步骤 包括： 对所述多任务模型设置初始训练参数， 所述初始训练参数是完成训练 的预设模型的模 型参数； 根据各张所述训练图像的食物标签以及食物新鲜度标签， 对设置初始训练参数的所述 多任务模型的第一梯度值以及第二梯度值进行多轮训练。 5.根据权利要求2所述的食物检测方法， 其特征在于， 所述第 一训练权重根据 所述食物 识别任务的学习率确定， 所述第二训练权 重根据所述食物新鲜度识别任务的学习率确定 。 6.根据权利要求2所述的食物检测方法， 其特征在于， 所述多任务模型包括并联设置的 第一解码 器以及第二解码 器， 所述第一解码 器以及所述第二解码 器均包括三层 全连接层以 及一层输出层， 所述第一解码器用于识别所述食物图像中的食物， 所述第二解码器用于识 别所述食物图像中的食物新鲜度。 7.一种食物检测装置， 其特 征在于， 包括： 输入模块， 用于将待检测的第 一食物图像输入至识别模型， 其中， 所述识别模型的训练 包括食物识别任务的第一梯度值的训练以及食物新鲜度识别任务的第二梯度值的训练， 且 所述第一梯度值以及所述第二梯度值在训练过程中满足梯度归一 化条件； 确定模块， 用于根据所述识别模型的输出结果， 确定所述第一食物图像中食物以及所 述食物的新鲜度。权　利　要　求　书 1/2 页 2 CN 114743193 A 28.一种食物检测设备， 其特 征在于， 包括： 存 储器和处 理器； 所述存储器存储计算机执 行指令； 所述处理器执行所述存储器存储的计算机执行指令， 使得所述处理器执行如权利要求 1至6任一项所述的食物检测方法。 9.根据权利要求8所述的食物检测设备， 其特 征在于， 所述食物检测设备为冰箱。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质中存储有计算机 执行指令， 所述计算机执行指 令被处理器执行时用于实现如权利要求 1至6任一项 所述的食 物检测方法。权　利　要　求　书 2/2 页 3 CN 114743193 A 3