全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210540238.8 (22)申请日 2022.05.18 (71)申请人 京东科技控股 股份有限公司 地址 100176 北京市大兴区北京经济技 术 开发区科创十一 街18号C座2层2 21室 (72)发明人 石凡 刘鑫辰 左佳伟 王林芳  张炜 梅涛  (74)专利代理 机构 中国贸促会专利商标事务所 有限公司 1 1038 专利代理师 张雷 许蓓 (51)Int.Cl. G06T 13/40(2011.01) G06T 7/246(2017.01) G06T 7/207(2017.01) G06V 20/70(2022.01)G06V 10/44(2022.01) G06V 10/82(2022.01) (54)发明名称 图像的生 成方法、 装置和非易 失性计算机可 读存储介质 (57)摘要 本公开涉及一种图像的生 成方法、 装置和非 易失性计算机可读存储介质, 涉及计算机技术领 域。 该生成方法, 包括: 提取第一图像中目标的多 个第一轮廓特征点; 根据需要生成的目标的动 作, 对多个第一轮廓特征点进行调整, 确定多个 第二轮廓特征点; 根据多个第二轮廓特征点, 利 用图像生成模型, 生成第二图像。 本公开的技术 方案能够提高生成的图像质量。 权利要求书3页 说明书10页 附图5页 CN 114937106 A 2022.08.23 CN 114937106 A 1.一种图像的生成方法, 包括: 提取第一图像中目标的多个第一轮廓特 征点; 根据需要生成的所述目标的动作, 对所述多个第一轮廓特征点进行调整, 确定多个第 二轮廓特 征点; 根据所述多个第二轮廓特 征点, 利用图像生成模型, 生成第二图像。 2.根据权利要求1所述的生成方法, 其中, 所述提取第 一图像中目标的多个第 一轮廓特 征点包括: 提取所述第一图像中目标的轮廓线和所述目标 上的多个关键点; 根据所述轮廓线和所述多个关键点, 确定所述轮廓线上的所述多个第一轮廓特 征点。 3.根据权利要求2所述的生成方法, 其中, 所述根据所述轮廓线和所述多个关键点, 确 定所述轮廓线上的多个第一轮廓特 征点包括: 根据所述目标的结构信息, 连接所述多个关键点, 确定多条关键连线; 根据所述多条关键连线和所述轮廓线, 确定所述多个第一轮廓特 征点。 4.根据权利要求3所述的生成方法, 其中, 所述根据所述多条关键连线和所述轮廓线, 确定所述多个第一轮廓特 征点包括: 根据所述多条关键连线的垂线与所述轮廓线的交点, 确定所述多个第一轮廓特 征点。 5.根据权利要求2所述的生成方法, 其中, 所述提取所述第 一图像中目标的轮廓线和所 述目标上的多个关键点包括: 利用语义分割网络模型, 提取第一图像中目标的轮廓线; 利用目标检测网络模型, 提取 所述目标 上的多个关键点。 6.根据权利要求1所述的生成方法, 其中, 所述根据所述多个第二轮廓特征点, 利用图 像生成模型, 生成第二图像包括: 利用特征提取模型, 提取 所述第一图像中各第一轮廓特 征点的邻域的特 征信息; 根据所述特征信息和所述多个第二轮廓特征点, 利用所述图像生成模型, 生成所述第 二图像。 7.根据权利要求6所述的生成方法, 其中, 所述特 征提取模型为卷积核模型。 8.根据权利要求1所述的生成方法, 其中, 所述第一图像为第一动态影 像中的帧图像, 所述根据需要生成的所述目标的动作, 对所述多个第一轮廓特征点进行调整, 确定多 个第二轮廓特 征点包括: 根据需要生成的所述目标的多个动作, 分别确定多个第二轮廓特征点组, 每一个第二 轮廓特征点组包括多个第二轮廓特 征点; 根据所述多个第二轮廓特 征点, 利用图像生成模型, 生成第二图像包括: 根据所述多个第二轮廓特征点组, 利用所述图像生成模型, 分别生成多个第二图像作 为多个关键帧图像; 还包括: 在所述多个关键帧图像之间, 利用视频插帧算法生成多个过渡帧图像; 生成包含所述多个关键帧图像和所述多个过渡帧图像的第二动态影 像。 9.根据权利要求8所述的生成方法, 其中, 所述在所述多个关键帧图像之间, 利用视频 插帧算法生成多个过渡帧图像包括:权 利 要 求 书 1/3 页 2 CN 114937106 A 2在所述多个关键帧图像中, 将第一关键帧图像确定为本轮迭代的起始帧图像, 将第二 关键帧图像确定为本轮迭代的结束帧图像; 利用视频插帧算法, 生成所述本轮迭代的起始帧图像和所述本轮迭代的结束帧图像之 间的本轮迭代的过渡帧图像; 将所述本轮迭代的过渡帧图像确定为下一轮迭代的结束帧图像, 利用所述视频插帧算 法, 生成所述本轮迭代的起始帧图像和所述下一轮迭代的结束帧图像之间的下一轮迭代的 过渡帧图像, 重复本步骤, 直到满足迭代条件; 将所述本轮迭代的过渡帧图像确定为下一轮迭代的起始帧图像, 利用所述视频插帧算 法, 生成所述下一轮迭代的起始帧图像和所述本轮迭代的结束帧图像之间的下一轮迭代的 过渡帧图像, 重复本步骤, 直到满足迭代条件。 10.根据权利要求1 ‑9任一项所述的生成方法, 还 包括: 根据第一图像样本的多个轮廓特征点样本, 利用所述图像生成模型, 生成第二图像样 本; 根据所述第二图像样本与所述第一图像样本的差异, 计算 生成损失函数; 利用所述 生成损失函数, 训练所述图像生成模型。 11.根据权利要求10所述的生成方法, 还 包括: 利用特征提取模型, 提取所述第 一图像样本 中各轮廓特征点样本的邻域的特征信 息样 本; 其中, 所述利用所述 生成损失函数, 训练所述图像生成模型包括: 根据所述特 征信息样本, 计算对比损失函数; 利用所述对比损 失函数和所述生成损 失函数, 训练所述图像生成模型、 所述特征提取 模型和对抗网络模型, 所述对抗网络模型用于区分所述第一图像样本与所述第二图像样 本。 12.一种图像的生成装置, 包括: 提取单元, 用于提取第一图像中目标的多个第一轮廓特 征点; 确定单元, 用于根据需要生成的所述目标的动作, 对所述多个第一轮廓特征点进行调 整, 确定多个第二轮廓特 征点; 生成单元, 根据所述多个第二轮廓特 征点, 利用图像生成模型, 生成第二图像。 13.根据权利要求12所述的生成装置, 其中, 所述生成单元根据第一图像样本的多个轮廓特征点样本, 利用所述图像生成模型, 生 成第二图像样本; 所述生成装置, 还 包括: 训练单元, 用于根据所述第二图像样本与所述第一图像样本的差异, 计算生成损 失函 数, 利用所述 生成损失函数, 训练所述图像生成模型。 14.根据权利要求13所述的生成装置, 其中, 所述提取单元利用特征提取模型, 提取所述第 一图像样本 中各轮廓特征点样本的邻域 的特征信息样本; 所述训练单元根据所述特征信息样本, 计算对比损 失函数, 利用所述对比损 失函数和 所述生成损失函数, 训练所述图像生成模型、 所述特征提取模 型和对抗网络模型, 所述对抗权 利 要 求 书 2/3 页 3 CN 114937106 A 3

PDF文档 专利 图像的生成方法、装置和非易失性计算机可读存储介质

文档预览
中文文档 19 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 图像的生成方法、装置和非易失性计算机可读存储介质 第 1 页 专利 图像的生成方法、装置和非易失性计算机可读存储介质 第 2 页 专利 图像的生成方法、装置和非易失性计算机可读存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-03-03 12:10:35上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。