(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210214053.8 (22)申请日 2022.03.04 (71)申请人 无锡乐骐科技股份有限公司 地址 214142 江苏省无锡市新吴区菱湖大 道111号国家软件园天鹅座D座16 01室 (72)发明人 马勇　 (51)Int.Cl. H04N 5/232(2006.01) G06V 40/20(2022.01) G06V 10/44(2022.01) (54)发明名称 一种基于多人交互动作判 断的人机交互判 断方法及装置 (57)摘要 本发明公开了一种基于多人交互动作判断 的人机交互判断方法及装置， 涉及机器学习领 域。 所述方法及装置是通过摄像头实现对多人交 互动作的动态追踪并执行该动作对应的触发行 为， 并将该行为与传统的人机交互方式进行融 合， 从而实现智 能化拍摄。 本发明公开的目的是 为了解决现有技术中无法对多人交互方式进行 动态识别并处理的问题。 本发明公开的系统能实 现多人交互与人机交互的双重交互模式， 交互性 更强， 更加智能化。 权利要求书1页 说明书4页 附图2页 CN 114598817 A 2022.06.07 CN 114598817 A 1.一种基于多人交 互动作判断的人机交 互判断方法， 其特 征在于， 包括： S1： 开启摄 像头， 从交 互判断数据集中选择设定交 互判断数据； S2： 根据交互判断数据确定要识别的人体特征点， 通过摄像头识别拍照区域中多人对 应特征点并标记； S3： 摄像头获取并识别时序连续的N帧图像， 将所述N帧图像与交互判断数据进行比对 判断； S4： 向目标设备返回判断结果， 判断相同时触发拍照指令 。 2.根据权利要求1所述的一种基于多人交互动作判断的人机交互判断方法， 其特征在 于： S1所述交互判断数据集包括不同多人交互动作对应的标记点移动数据， 包括但不限于 接吻、 击掌， 所述标记点 根据不同的交 互动作设定 。 3.根据权利要求1所述的一种基于多人交互动作判断的人机交互判断方法， 其特征在 于： 所述交互判断数据为按照时序排列 的图像对应的标记点数据以及标记点位置关系数 据， 根据S1设定的交互判断数据， 得到标记点的位置移动关系， 初始状态为比对准备状态， 在摄像头获取 的时序连续图像中依 次计算任意连续M帧图像中标记点位置的变化， 当距离 变化关系与设定的交互判断数据里任意连续M帧图像中标记点位置变化满足给定条件时， 判定为匹配 状态， 继而执 行匹配操作， 触发拍照指令 。 4.根据权利要求3所述的一种基于多人交互动作判断的人机交互判断方法， 其特征在 于： 在比对判断开始后， 若识别图像中的任意连续K帧标记 点位置变化关系无法满足给定条 件， 则终止当前进程， 重新进入比对准备状态， 其中， K为大于2的自然数。 5.根据权利要求3所述的一种基于多人交互动作判断的人机交互判断方法， 其特征在 于： 进入匹配状态后， 对摄像头采集的图像中的差异图像进 行平滑处理， 所述差异图像为 非 终止状态下， 标记点数据与预设的交互判断数据之间存在差异 时的图像， 所述平滑处理包 括： 将所述差异图像更正为与对应所述比对判断数据相同的状态， 或者， 将所述差异图像从 摄像头采集的识别数据中剔除。 6.根据权利要求1所述的一种基于多人交互动作判断的人机交互判断方法， 其特征在 于： S2中摄像头识别的所述拍照区域为基于判断数据特征点的图像局部空间区域， 由所述 摄像头采集图像中， 选择对应于判断数据特 征点相关的局部图像区域， 并执 行比对处 理。 7.一种基于多人交 互动作判断的人机交 互系统装置， 其特 征在于， 包括： 影像获取模块， 所述影 像获取模块用于获取摄 像头所获取的时序帧图像； 影像判断模块， 所述影像判断模块用于将所述影像获取模块获取的时序帧图像与 预设 的比对判断数据进行比对， 并返回判断结果； 影像输出模块， 所述影像输出模块用于根据 所述影像判断模块返回的判断结果执行相 应指令， 若判断成功则触发拍照功能并输出拍照图像， 若判断失败则继续判断直至当前进 程被终止 。 8.一种电子设备， 其特征在于： 所述设备包括存储器、 处理器， 所述存储器用于存储可 在处理器上运行 的计算机指令， 所述处理器用于在执行所述计算机指令时实现权利要求1 至7任一所述的方法。 9.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述程序被处理器 执行时实现权利要求1至7任一所述的方法。权　利　要　求　书 1/1 页 2 CN 114598817 A 2一种基于多人交互动作判断的 人机交互判断方 法及装置 技术领域 [0001]本发明涉及机器学习领域， 特别是涉及一种基于多人交互动作判断的人机交互判 断方法及装置 。 背景技术 [0002]随着AI时代的来临， 人们日常生活中的产品也在向着智能化、 电子化的方向发展， 同时， 快节奏的生活不仅仅给人带来了生活上 的便利， 时间成本的提高也对人们的生活方 式提出了更高的要求， 智能与生活的互相促进， 才帮助大家能够更好的进入智能化的时代， 因此， 出现了越来越多的智能化的人机交互方式， 以满足人们对个性化的追求。 例如手机及 其相关交互系统， 用户已经可以通过非触控的方式来对手机执行一些操作， 但是现有的技 术仅可以支持通过识别固有姿势的方式来实现指 令的操作， 缺少了多 人交互对智能设备的 执行实现方法， 单一的图像识别只是做简单的0 ‑1判断， 无法做到动态的追踪并执行相应的 动作， 即现有技 术很难实现真正的智能化操作。 发明内容 [0003]为了解决上述现有技术中无法对多人交互方式进行动态识别并处理的问题， 本发 明提出了一种基于多 人交互动作判断的人机交互判断方法及装置， 通过摄像头实现对多 人 交互动作的动态追踪并执行该动作对应的触发行为， 并将该行为与传统的人机交互方式进 行融合， 从而实现真正 意义上的智能化。 [0004]鉴于以上情况， 本发明提出了一种基于多人交互动作判断的人机交互判断方法， 其特征在于， 包括： [0005]S1： 开启摄 像头， 从交 互判断数据集中选择设定交 互判断数据； [0006]S2： 根据交互判断数据确定要识别的人体特征点， 通过摄像头识别拍照区域中多 人对应特 征点并标记； [0007]S3： 摄像头获取并识别时序连续的N帧图像， 将所述N帧图像与交互判断数据进行 比对判断； [0008]S4： 向目标设备返回判断结果， 判断相同时触发拍照指令 。 [0009]作为一种优选的实施方式， S1所述交互判断数据集包括不同多人交互动作 对应的 标记点移动数据， 包括但不限于 接吻、 击掌， 所述标记点 根据不同的交 互动作设定 。 [0010]作为一种优选的实施方式， 所述交互判断数据为按照时序排列的图像对应的标记 点数据以及标记点位置关系数据， 根据S1设定的交互判断数据， 得到标记点的位置移动关 系， 初始状态为比对准备状态， 在摄像头获取的时序连续图像中依次计算任意连续M帧图像 中标记点位置的变化， 当距离变化关系与设定的交互判断数据里任意连续M帧图像中标记 点位置变化满足给定条件时， 判定为匹配 状态， 继而执 行匹配操作， 触发拍照指令 。 [0011]作为一种优选的实施方式， 在比对判断开始后， 若识别图像中的任意连续K帧标记 点位置变化关系无法满足给定条件， 则终止 当前进程， 重新进入比对准备状态， 其中， K为大说　明　书 1/4 页 3 CN 114598817 A 3