(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210168827.8 (22)申请日 2022.02.23 (71)申请人 广州方硅信息技 术有限公司 地址 511400 广东省广州市番禺区南村镇 万博二路79号3108 (72)发明人 王璞　陈增海　郑康元　 (74)专利代理 机构 广州骏思知识产权代理有限 公司 44425 专利代理师 潘桂生 (51)Int.Cl. G06V 40/16(2022.01) G06V 20/40(2022.01) G06V 10/44(2022.01) (54)发明名称 直播间的封面图像检测方法、 装置、 计算机 设备及介质 (57)摘要 本申请涉及网络直播技术领域， 提出一种直 播间的封面图像检测方法、 装置、 计算机设备及 存储介质， 该方法包括： 获取待检测的封面图像， 对封面图像进行人脸检测， 获得人脸检测结果， 若所述人脸检测结果中存在一个或多个人脸区 域， 获取每个所述人脸区域的区域尺 寸以及所述 封面图像的尺 寸， 若每个人脸区域在封面图像中 的占比均小于预设的占比阈值、 且宽高比例均在 预设的比例阈值范围内， 对每个人脸区域进行人 脸轮廓关键点检测， 获得人脸轮廓关键点检测结 果； 若人脸轮廓关键点检测结果均满足预设条 件， 将封面图像作为目标封面图像， 提高了封面 图像检测的效率。 权利要求书3页 说明书10页 附图6页 CN 114519889 A 2022.05.20 CN 114519889 A 1.一种直 播间的封面图像 检测方法， 其特 征在于， 所述方法包括 步骤： 获取待检测的封面图像； 对所述封面图像进行 人脸检测， 获得 人脸检测结果； 若所述人脸检测结果中存在一个或多个人脸 区域， 获取每个所述人脸 区域的区域尺寸 以及所述封面图像的尺寸； 若根据每个所述人脸 区域的区域尺寸以及所述封面图像的尺寸， 判断出每个所述人脸 区域在所述封面图像中的占比均小于预设的占比阈值、 且每个所述人脸区域宽高比例均在 预设的比例阈值范围内， 对每个所述人脸区域进行人脸轮廓关键点检测， 获得每个所述人 脸区域的人脸轮廓关键点检测结果； 若每个所述人脸 区域的所述人脸轮廓关键点检测结果均满足预设条件， 将所述封面图 像作为目标封面图像。 2.根据权利要求1所述的直 播间的封面图像 检测方法， 其特 征在于： 所述若所述人脸检测结果中存在一个或多个人脸 区域， 获取每个所述人脸区域的区域 尺寸以及所述封面图像的尺寸的步骤之前， 包括： 若所述人脸检测结果中存在一个或多个人脸 区域， 对每个所述人脸区域进行虚拟人像 检测， 获得每 个所述人脸区域的虚拟人像 检测结果； 若每个所述人脸 区域的虚拟人像检测结果均不存在虚拟人像， 获取每个所述人脸区域 的区域尺寸以及所述封面图像的尺寸。 3.根据权利要求1所述的直 播间的封面图像 检测方法， 其特 征在于： 所述对所述封面图像进行 人脸检测， 获得 人脸检测结果的步骤， 包括： 利用第一卷积神经网络对所述封面图像进行人脸检测， 获得所述封面图像中包括人脸 的多个人脸检测框以及对应的置信度评分； 将多个所述人脸检测框按照所述置信度评分从高到低的顺序进行排序， 获得人脸检测 框列表； 将置信度评分最高的人脸检测框添加到输出列表中， 并在所述人脸检测框列表中删除 所述置信度评分最高的人脸检测框； 计算所述置信度评分最高的人脸检测框和其它人脸检测框的重叠度， 在所述人脸检测 框列表中删除重 叠度大于 重叠度阈值的人脸检测框； 计算所述人脸检测框列表剩下的置信度评分最高的人脸检测框和其它人脸检测框的 重叠度， 在所述人脸检测框列表中删除重叠度大于重叠度阈值的人脸检测框， 直至所述人 脸检测框列表为空， 根据所述输出列表， 获得 人脸检测结果。 4.根据权利要求2所述的直 播间的封面图像 检测方法， 其特 征在于： 所述若所述人脸检测结果中存在一个或多个人脸 区域， 对每个所述人脸 区域进行虚拟 人像检测， 获得每 个所述人脸区域的虚拟人像 检测结果的步骤， 包括： 若所述人脸检测结果中存在一个或多个人脸 区域， 利用第 二卷积神经网络对每个所述 人脸区域进行虚拟人像 检测， 获得每 个所述人脸区域的虚拟人像置信度评分； 若所述虚拟人像置信度评分小于预设分值， 确定对应的所述人脸区域不存在虚拟人 像。 5.根据权利要求1所述的直 播间的封面图像 检测方法， 其特 征在于：权　利　要　求　书 1/3 页 2 CN 114519889 A 2所述若根据每个所述人脸区域的区域尺寸以及所述封面图像的尺寸， 判断出每个所述 人脸区域在所述封面图像中的占比均小于预设的占比阈值、 且每个所述人脸区域宽高比例 均在预设的比例阈值范围内， 对每个所述人脸区域进行人脸轮廓关键点检测， 获得每个所 述人脸区域的人脸轮廓关键点检测结果的步骤， 包括： 若根据每个所述人脸 区域的区域尺寸以及所述封面图像的尺寸， 判断出每个所述人脸 区域在所述封面图像中的占比均小于预设的占比阈值、 且每个所述人脸区域宽高比例均在 预设的比例阈值范围内， 将每个所述人脸区域沿自身的对角线方向向外扩充预设比例， 获 得对应的目标 人脸区域； 将每个所述目标人脸 区域输入至人脸轮廓关键点检测模型， 获得每个所述目标人脸 区 域的人脸轮廓关键点检测结果； 其中， 所述人脸轮廓关键点检测结果用于指示每个所述 目 标人脸区域中人脸轮廓关键点的位置和置信度评分。 6.根据权利要求5所述的直 播间的封面图像 检测方法， 其特 征在于： 所述若每个所述人脸 区域的所述人脸轮廓关键点检测结果均满足预设条件， 将所述封 面图像作为目标封面图像的步骤， 包括： 若每个所述人脸 区域的所述人脸轮廓关键点的位置在所述封面图像内， 且每个所述人 脸区域的所述人脸轮廓关键点的置信度评 分大于预设阈值， 确定所述人脸轮廓关键点为目 标轮廓关键点； 若所述目标轮廓关键点的数量大于预设数值， 将所述封面图像作为目标封面图像。 7.一种直 播间的封面图像 检测装置， 其特 征在于， 包括： 封面图像获取模块， 用于获取待检测的封面图像； 人脸检测模块， 用于对所述封面图像进行 人脸检测， 获得 人脸检测结果； 尺寸获取模块， 用于若所述人脸检测结果中存在一个或多个人脸区域， 获取每个所述 人脸区域的区域尺寸以及所述封面图像的尺寸； 关键点检测模块， 用于若根据每个所述人脸区域的区域尺寸以及所述封面图像的尺 寸， 判断出每个所述人脸区域在所述封面图像中的占比均小于预设的占比阈值、 且每个所 述人脸区域宽高比例均在预设的比例阈值范围内， 对每个所述人脸区域进 行人脸轮廓关键 点检测， 获得每 个所述人脸区域的人脸轮廓关键点检测结果； 目标封面图像获得模块， 用于若每个所述人脸区域的所述人脸轮廓关键点检测结果均 满足预设条件， 将所述封面图像作为目标封面图像。 8.根据权利要求7所述的直播间的封面图像检测装置， 其特征在于， 所述人脸检测模块 包括： 人脸检测框获得单元， 用于利用第一卷积神经网络对所述封面图像进行人脸检测， 获 得所述封面图像中包括人脸的多个人脸检测框以及对应的置信度评分； 人脸检测框列表获得单元， 用于将多个所述人脸检测框按照所述置信度评分从高到低 的顺序进行排序， 获得 人脸检测框列表； 输出列表添加单元， 用于将置信度评分最高的人脸检测框添加到输出列表中， 并在所 述人脸检测框列表中删除所述置信度评分最高的人脸检测框； 重叠度计算单元， 用于计算所述置信度评分最高的人脸检测框和其它人脸检测框的重 叠度， 在所述人脸检测框列表中删除重 叠度大于 重叠度阈值的人脸检测框；权　利　要　求　书 2/3 页 3 CN 114519889 A 3