(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210113904.X (22)申请日 2022.01.30 (71)申请人 中国农业银行股份有限公司 地址 100005 北京市东城区建国门内大街 69号 (72)发明人 张津　刘帅　郎需明　 (74)专利代理 机构 北京品源专利代理有限公司 11332 专利代理师 严慧 (51)Int.Cl. G06V 40/16(2022.01) G06V 10/44(2022.01) G06V 10/75(2022.01) G06K 9/62(2022.01) (54)发明名称 一种微表情识别方法、 装置、 设备及存储介 质 (57)摘要 本发明公开了一种微表情识别方法， 包括： 提取视频中包含微表情的图像序列； 根据图像序 列建立空间直角坐标系， 分别确定三个坐标面的 特征直方图及对应权重， 并生成加权特征； 根据 加权特征在微表情分类器中进行匹配， 确定图像 序列对应的微表情类别。 本发明公开的微表情识 别方法， 利用LBP算子和SMBP算子组成SMLBP算子 进行图像的特征提取， 采用近邻点对相减， 不仅 降低特征 维数， 且对遮挡物、 光照更具鲁棒性， 并 可以代表人脸微表情的运动方向； 同时采用自适 应权重算法， 给予每个平面不同权重， 避免了固 定阈值不一定适应所有视频序列的弊端， 可以更 好地识别微表情。 权利要求书2页 说明书11页 附图3页 CN 114445900 A 2022.05.06 CN 114445900 A 1.一种微表情识别方法， 其特 征在于， 包括： 提取视频中包 含微表情的图像序列； 根据所述图像序列建立空间直角坐标系， 分别确定三个坐标面的特征直方图及对应权 重， 并生成加权特 征； 根据所述加权特征在微表情分类器中进行匹配， 确定所述图像序列对应的微表情类 别。 2.根据权利要求1所述的方法， 其特 征在于， 提取视频中包 含微表情的图像序列， 包括： 提取所述视频中至少两张包 含微表情的连续图像； 对所述连续图像进行欧拉放大、 图像去噪及尺寸归一化处理， 将处理后的所述连续图 像作为所述图像序列。 3.根据权利要求1所述的方法， 其特征在于， 分别确定三个坐标面的特征直方图及对应 权重， 并生成加权特 征， 包括： 确定所述 三个坐标面上每 个像素点的局部二 值模式特 征和对称幅值 二值模式特 征； 根据所述局部二值模式特征和对称幅值二值模式特征分别确定所述三个坐标面的特 征直方图； 根据所述特征直方图分别确定三个坐标面的权重， 将所述权重与特征直方图对应相乘 得到所述加权特 征。 4.根据权利要求3所述的方法， 其特征在于， 确定所述三个坐标面上每个像素点的局部 二值模式特 征和对称幅值 二值模式特 征， 包括： 针对每个坐标面， 确定当前像素点； 以所述当前像素点为 圆心确定当前像素环， 在所述当前像素环上提取所述局部二值模 式特征和对称幅值 二值模式特 征； 将下一个像素点确定为所述当前像素点， 返回执行所述以所述当前像素点为 圆心确定 当前像素环， 在所述当前像素环上提取所述局部二值模式特征和对称幅值二值模式特征的 步骤， 直到所述 坐标面上的像素点遍历完成。 5.根据权利要求3所述的方法， 其特征在于， 根据 所述局部二值模式特征和对称幅值二 值模式特 征分别确定所述 三个坐标面的特 征直方图， 包括： 分别确定所述 三个坐标面对应的局部二 值模式直方图和对称幅值 二值模式直方图； 将同一坐标面对应的所述局部二值模式直方图和对称幅值二值模式直方图进行组合， 确定为相应坐标面的特 征直方图。 6.根据权利要求3所述的方法， 其特征在于， 根据 所述特征直方图分别确定三个坐标面 的权重， 包括： 对所述特 征直方图进行 标准化； 根据标准 化之后的所述特 征直方图分别确定所述 三个坐标面对应的权 重。 7.根据权利要求1中所述的方法， 其特征在于， 所述微表情分类器中包括至少两个微表 情模型， 根据所述加权特征在微表情分类器中进行匹配， 确定所述图像序列对应的微表情 类别， 包括： 根据所述加权特 征与所述至少两个微表情模型进行匹配； 将相似度最高的微表情模型确定为所述图像序列对应的微表情类别。权　利　要　求　书 1/2 页 2 CN 114445900 A 28.一种微表情识别装置， 其特 征在于， 包括： 图像序列提取模块， 用于提取视频中包 含微表情的图像序列； 加权特征生成模块， 用于根据所述图像序列建立空间直角坐标系， 分别确定三个坐标 面的特征直方图及对应权 重， 并生成加权特 征； 微表情类别确定模块， 用于根据所述加权特征在微表情分类器中进行匹配， 确定所述 图像序列对应的微表情类别。 9.一种电子设备， 其特 征在于， 所述电子设备包括： 至少一个处 理器； 以及 与所述至少一个处 理器通信连接的存 储器； 其中， 所述存储器存储有可被所述至少一个处理器执行的计算机程序， 所述计算机程序被所 述至少一个处理器执行， 以使所述至少一个处理器能够执行权利要求1 ‑7中任一项所述的 微表情识别方法。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质存储有计算机指 令， 所述计算机指令用于使处理器执行时实现权利要求1 ‑7中任一项所述的微表情识别方 法。权　利　要　求　书 2/2 页 3 CN 114445900 A 3