(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210113640.8 (22)申请日 2022.01.30 (71)申请人 中国农业银行股份有限公司 地址 100005 北京市东城区建国门内大街 69号 (72)发明人 张津　刘帅　 (74)专利代理 机构 北京品源专利代理有限公司 11332 专利代理师 刘臣刚 (51)Int.Cl. G06V 40/16(2022.01) G06V 10/44(2022.01) G06V 10/52(2022.01) G06V 10/764(2022.01) G06V 10/774(2022.01)G06V 10/82(2022.01) G06V 10/54(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种表情识别方法、 装置、 设备及存 储介质 (57)摘要 本发明公开了一种表情识别方法、 装置、 设 备及存储介质。 该方法包括： 获取待识别视频中 每帧图像的低频特征信息和哈尔特征信息； 将所 述每帧图像的低频特征信息和哈尔特征信息输 入目标模型中， 得到每帧图像对应的人脸图像， 其中， 所述目标模型通过目标样 本集迭代训练神 经网络模型得到， 所述目标样本包括： 低频特征 信息样本、 哈尔特征信息样本以及所述低频特征 信息样本和哈尔特征信息样本对应的人脸图像 样本； 根据所述每帧图像对应的人脸图像确定目 标表情， 通过本发明的技术方案， 能够缩减特征 提取时间， 提高计算效率。 权利要求书2页 说明书12页 附图3页 CN 114445899 A 2022.05.06 CN 114445899 A 1.一种表情识别方法， 其特 征在于， 包括： 获取待识别视频中每帧图像的低频 特征信息和哈尔特 征信息； 将所述每帧图像的低频特征信 息和哈尔特征信 息输入目标模型中， 得到每帧图像对应 的人脸图像， 其中， 所述目标模 型通过目标样 本集迭代训练神经网络模型得到， 所述目标样 本包括： 低频特征信息样本、 哈尔特征信息样本以及所述低频特征信息样本和哈尔特征信 息样本对应的人脸图像样本； 根据所述每帧图像对应的人脸图像确定目标表情。 2.根据权利要求1所述的方法， 其特征在于， 根据 所述每帧图像对应的人脸图像确定目 标表情， 包括： 获取所述每帧图像对应的人脸图像的纹 理特征图； 根据所述每帧图像对应的人脸图像的纹 理特征图确定目标表情。 3.根据权利要求2所述的方法， 其特征在于， 获取所述每帧图像对应的人脸图像的纹理 特征图， 包括： 以每帧图像对应的人脸图像的每 个像素点作为窗口中心点划分， 得到 至少一个窗口； 根据每个窗口的窗口中心点的相邻像素点和窗口中心点的对比结果确定每帧图像对 应的人脸图像的纹 理特征图。 4.根据权利要求1所述的方法， 其特征在于， 通过目标样本集迭代训练神经网络模型， 包括： 建立单层多尺度卷积神经网络； 将所述低频特征信息样本和哈尔特征信息样本输入所述单层多尺度卷积神经网络模 型， 得到预测人脸图像； 根据所述低频特征信息样本和哈尔特征信息样本对应的人脸图像样本和所述预测人 脸图像形成的目标函数训练所述单层多尺度卷积神经网络的参数； 返回执行将所述低频特征信息样本和哈尔特征信息样本输入所述单层多尺度卷积神 经网络， 得到预测人脸图像的操作， 直至得到目标模型。 5.根据权利要求 4所述的方法， 其特 征在于， 还 包括： 获取图像样本集； 对所述图像样本集中的每个图像样本进行离散小波变换， 得到每个图像样本对应的低 频特征信息样本； 获取所述图像样本集中的每 个图像样本对应的哈尔特 征信息样本； 根据所述每个图像样本对应的低频特征信 息样本、 每个图像样本对应的哈尔特征信 息 样本和每 个图像样本对应的人脸图像样本生成目标样本集。 6.根据权利要求1所述的方法， 其特征在于， 获取待识别 视频中每帧图像的低频特征信 息和哈尔特 征信息， 包括： 对待识别视频中每帧图像进行离 散小波变换， 得到每帧图像的低频 特征信息； 获取所述待识别视频中每帧图像对应的哈尔特 征信息。 7.一种表情识别装置， 其特 征在于， 包括： 获取模块， 用于获取待识别视频中每帧图像的低频 特征信息和哈尔特 征信息； 人脸图像确定模块， 用于将所述每帧图像的低频特征信 息和哈尔特征信 息输入目标模权　利　要　求　书 1/2 页 2 CN 114445899 A 2型中， 得到每帧图像对应的人脸图像， 其中， 所述目标模型通过目标样本集迭代训练神经网 络模型得到， 所述目标样本包括： 低频特征信息样本、 哈尔特征信息样本以及所述低频特征 信息样本和哈尔特 征信息样本对应的人脸图像样本； 表情确定模块， 用于根据所述每帧图像对应的人脸图像确定目标表情。 8.根据权利要求7 所述的装置， 其特 征在于， 所述表情确定模块具体用于： 获取所述每帧图像对应的人脸图像的纹 理特征图； 根据所述每帧图像对应的人脸图像的纹 理特征图确定目标表情。 9.一种电子设备， 其特 征在于， 包括： 一个或多个处 理器； 存储器， 用于存 储一个或多个程序； 当所述一个或多个程序被所述一个或多个处理器执行时， 使得所述处理器实现如权利 要求1‑6中任一所述的方法。 10.一种包含计算机程序的计算机可读存储介质， 其上存储有计算机程序， 其特征在 于， 该程序被一个或多个处 理器执行时实现如权利要求1 ‑6中任一所述的方法。权　利　要　求　书 2/2 页 3 CN 114445899 A 3