standard download
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211283618.4 (22)申请日 2022.10.20 (71)申请人 北京百度网讯科技有限公司 地址 100085 北京市海淀区上地十街10号 百度大厦2层 (72)发明人 周航 王凯思源 何栋梁 刘经拓  (74)专利代理 机构 北京品源专利代理有限公司 11332 专利代理师 马迪 (51)Int.Cl. G06T 15/00(2011.01) G06T 13/40(2011.01) G06V 40/16(2022.01) (54)发明名称 一种图像生成方法、 装置、 电子设备和介质 (57)摘要 本公开提供了一种图像生成方法、 装置、 电 子设备和介质, 涉及人工智能技术领域, 具体为 计算机视觉、 增强现实、 虚拟现实、 深度学习等技 术领域, 可应用于元宇宙、 虚拟数字人等场景。 具 体实现方案为: 确定目标人物形象在目标图像中 的第一面部特征, 并根据第一面部特征生成目标 人物形象的第一面部轮廓图像; 确定样本人物形 象在样本图像中的第二面部特征, 并根据第二面 部特征生 成样本人物形象 的第二面部轮廓图像; 根据目标图像、 第一面部轮廓图像和第二面部轮 廓图像, 生成包含目标人物形象的待展示图像。 本公开能够提高根据样本图像生成包含目标人 物形象的待展示图像的速度, 减少了待展示图像 生成所消耗的时间。 权利要求书3页 说明书12页 附图5页 CN 115359166 A 2022.11.18 CN 115359166 A 1.一种图像生成方法, 包括: 根据包含目标人物形象的目标图像, 确定所述目标人物形象在所述目标图像中的第 一 面部特征, 并根据所述第一 面部特征生成所述目标 人物形象的第一 面部轮廓图像; 根据包含样本人物形象的样本图像, 确定所述样本人物形象在所述样本图像中的第 二 面部特征, 并根据所述第二 面部特征生成所述样本人物形象的第二 面部轮廓图像; 根据所述目标图像、 所述第一面部轮廓图像和所述第二面部轮廓图像, 生成包含所述 目标人物形象的待 展示图像。 2.根据权利要求1所述的方法, 其中, 所述第二面部特征包括第二面部形状特征、 第二 面部表情特 征和第二 面部位姿特 征中的至少一种; 所述根据所述第二 面部特征生成所述样本人物形象的第二 面部轮廓图像, 包括: 根据所述第二面部形状特征、 所述第二面部表情特征和所述第二面部位姿特征, 生成 所述样本人物形象的三维面部点云; 确定所述三维面部点云中的三维面部关键点, 并根据对所述三维面部关键点进行投影 的投影结果, 确定所述样本人物形象的二维面部关键点; 根据所述 二维面部关键点 生成所述第二 面部轮廓图像。 3.根据权利要求2所述的方法, 其中, 所述根据所述第二面部形状特征、 所述第二面部 表情特征和所述第二 面部位姿特 征, 生成所述样本人物形象的三维面部点云, 包括: 根据所述第 一面部特征中的第 一面部形状特征, 对所述第 二面部形状特征进行特征替 换, 生成替换面部形状特 征; 根据所述替换面部形状特征、 所述第二面部表情特征和所述第二面部位姿特征, 生成 所述样本人物形象的三维面部点云。 4.根据权利要求1所述的方法, 其中, 所述根据所述目标图像、 所述第一面部轮廓图像 和所述第二 面部轮廓图像, 生成包 含所述目标 人物形象的待 展示图像, 包括: 将所述第一面部轮廓图像和所述目标图像作为训练样本, 对待训练模型进行训练, 生 成图像翻译模型; 根据所述第二 面部轮廓图像和所述图像翻译模型, 生成所述待 展示图像; 其中, 所述待 展示图像用于驱动所述目标 人物形象。 5.根据权利要求4所述的方法, 其中, 所述根据所述第 二面部轮廓图像和所述图像翻译 模型, 生成所述待 展示图像, 包括: 确定目标五官在所述第 一面部轮廓图像中的第 一五官图像, 以及在所述第 二面部轮廓 图像中的第二五官图像; 确定所述第 一五官图像中第 一关键点和第 二关键点之间的第 一坐标距离值, 以及确定 所述第二五官图像中所述第一关键点和所述第二关键点之间的第二 坐标距离值; 根据所述第一坐标距离值和所述第二坐标距离值, 对所述第二五官图像进行缩放处 理, 并根据缩放处 理结果生成缩放 面部轮廓图像; 根据所述缩放 面部轮廓图像和所述图像翻译模型, 生成所述待 展示图像。 6.根据权利要求5所述的方法, 其中, 所述根据所述第 一坐标距离值和所述第 二坐标距 离值, 对所述第二五官图像进行缩放处 理, 包括: 根据所述第一坐标距离值和所述第二坐标距离值, 确定坐标缩放系数, 并根据所述坐权 利 要 求 书 1/3 页 2 CN 115359166 A 2标缩放系数对所述第二五官图像进行缩放处 理。 7.根据权利要求5所述的方法, 其中, 所述根据所述缩放面部轮廓图像和所述图像翻译 模型, 生成所述待 展示图像, 包括: 确定所述第 二五官图像中第 三关键点在缩放处理前的第 一图像坐标, 以及在缩放处理 后的第二图像坐标, 并根据所述第一图像坐标和所述第二图像坐标确定坐标相对位置; 根据所述坐标相对位置对缩放处理后的所述第 二五官图像进行平移处理, 并根据平移 处理结果生成优化 面部轮廓图像; 根据所述优化 面部轮廓图像和所述图像翻译模型, 生成所述待 展示图像。 8.一种图像生成装置, 包括: 第一面部轮廓图像确定模块, 用于根据包含目标人物形象的目标图像, 确定所述目标 人物形象在所述目标图像中的第一面部特征, 并根据所述第一面部特征生成所述目标人物 形象的第一 面部轮廓图像; 第二面部轮廓图像确定模块, 用于根据包含样本人物形象的样本 图像, 确定所述样本 人物形象在所述样本图像中的第二面部特征, 并根据所述第二面部特征生成所述样本人物 形象的第二 面部轮廓图像; 待展示图像生成模块, 用于根据所述目标图像、 所述第一面部轮廓图像和所述第二面 部轮廓图像, 生成包 含所述目标 人物形象的待 展示图像。 9.根据权利要求8所述的装置, 其中, 所述第二面部特征包括第二面部形状特征、 第二 面部表情特 征和第二 面部位姿特 征中的至少一种; 所述第二 面部轮廓图像确定模块, 具体还用于: 根据所述第二面部形状特征、 所述第二面部表情特征和所述第二面部位姿特征, 生成 所述样本人物形象的三维面部点云; 确定所述三维面部点云中的三维面部关键点, 并根据对所述三维面部关键点进行投影 的投影结果, 确定所述样本人物形象的二维面部关键点; 根据所述 二维面部关键点 生成所述第二 面部轮廓图像。 10.根据权利要求9所述的装置, 其中, 所述第二 面部轮廓图像确定模块, 具体还用于: 根据所述第 一面部特征中的第 一面部形状特征, 对所述第 二面部形状特征进行特征替 换, 生成替换面部形状特 征; 根据所述替换面部形状特征、 所述第二面部表情特征和所述第二面部位姿特征, 生成 所述样本人物形象的三维面部点云。 11.根据权利要求8所述的装置, 其中, 所述待 展示图像生成模块, 具体用于: 将所述第一面部轮廓图像和所述目标图像作为训练样本, 对待训练模型进行训练, 生 成图像翻译模型; 根据所述第二 面部轮廓图像和所述图像翻译模型, 生成所述待 展示图像; 其中, 所述待 展示图像用于驱动所述目标 人物形象。 12.根据权利要求1 1所述的装置, 其中, 所述待 展示图像生成模块, 具体还用于: 确定目标五官在所述第 一面部轮廓图像中的第 一五官图像, 以及在所述第 二面部轮廓 图像中的第二五官图像; 确定所述第 一五官图像中第 一关键点和第 二关键点之间的第 一坐标距离值, 以及确定权 利 要 求 书 2/3 页 3 CN 115359166 A 3

.PDF文档 专利 一种图像生成方法、装置、电子设备和介质

文档预览
中文文档 21 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共21页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种图像生成方法、装置、电子设备和介质 第 1 页 专利 一种图像生成方法、装置、电子设备和介质 第 2 页 专利 一种图像生成方法、装置、电子设备和介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 16:15:36上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。