(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211215394.3 (22)申请日 2022.09.30 (71)申请人 广州欢聚时代信息科技有限公司 地址 511442 广东省广州市番禺区南村镇 万博二路79 号万博商务区万达商业广 场北区B-1栋23层 (72)发明人 曾鹏　 (74)专利代理 机构 广州利能知识产权代理事务 所(普通合伙) 44673 专利代理师 王增鑫 (51)Int.Cl. G06T 19/00(2011.01) G06T 19/20(2011.01) G06T 3/00(2006.01) G06T 5/00(2006.01)G06T 7/10(2017.01) G06V 10/74(2022.01) G06V 10/75(2022.01) G06V 40/10(2022.01) G06Q 30/06(2012.01) (54)发明名称 模特图像生成方法及其装置、 设备、 介质、 产 品 (57)摘要 本申请涉及一种模特图像生成方法及其装 置、 设备、 介质、 产品， 所述方法包括： 获取人物着 装图像； 从模 特图库中召回与所述人物着装图像 中的人体具有相似姿态的模特模板， 所述模特模 板包括模特的身体图； 确定所述人物着装图像中 的原始服装图像相对于所述身体图的形变特征 参数， 根据所述形变特征参数变换所述原始服装 图像， 获得服装变换图像； 根据所述服装变换图 像与所述身体图预测出所述身体图相对应的服 装掩膜； 根据所述服装掩膜将所述服装变换图像 合成到所述身体图中， 获得模特着装图像。 本申 请能够将人物着装图像中的原始服装图像准确 迁移到模特模板的模特身体图中而合成出有效 的模特着装图像 。 权利要求书2页 说明书15页 附图5页 CN 115512085 A 2022.12.23 CN 115512085 A 1.一种模特图像生成方法， 其特 征在于， 包括： 获取人物着装图像； 从模特图库中召回与 所述人物着装图像中的人体具有相似姿态的模特模板， 所述模特 模板包括模特的身体图； 确定所述人物着装图像中的原始服装图像相对于所述身体图的形变特征参数， 根据 所 述形变特 征参数变换 所述原始服装图像， 获得服装变换图像； 根据所述 服装变换图像与所述身体图预测出 所述身体图相对应的服装 掩膜； 根据所述 服装掩膜将所述 服装变换图像合成到所述身体图中， 获得模特着装图像。 2.根据权利要求1所述的模特图像生成方法， 其特征在于， 从模特图库中召回与所述人 物着装图像中的人体具有相似姿态的模特模板， 所述模特模板包括模特的身体图， 包括： 采用人体关键点检测模型检测 确定所述人物着装图像的关键点特 征图； 计算所述人物着装图像的关键点特征图与模特图库中各个模特模板的身体图的关键 点特征图之 间的语义相似度， 所述各个模特模板的身体图的关键点特征图预先采用所述人 体关键点检测模型对所述身体图检测 确定； 筛选出语义相似度较 高的至少一个模特模板， 作为与 所述人物着装图像中的人体具有 相似姿态的模特模板 。 3.根据权利要求2所述的模特图像生成方法， 其特征在于， 确定所述人物着装图像 中的 原始服装图像相对于所述身体图的形变特 征参数， 包括： 获取所述人物着装图像中的原始服装图像及 关键点特征图构造为用户输入信 息， 输入 第一特征提取模型提取 出第一深层语义信息； 获取所述模特模板所包括的模特的原图、 身体图、 发型图、 关键点特征图构造为模板输 入信息， 输入第二特 征提取模型提取 出第二深层语义信息； 根据第一深层语义信 息和第二深层语义信 息预测出所述形变特征参数， 所述形变特征 参数用于关注所述人物着装图像中的原始服装图像相对于所述身体图产生的形变幅度信 息。 4.根据权利要求3所述的模特图像生成方法， 其特征在于， 根据 所述服装变换图像与 所 述身体图预测出 所述身体图相对应的服装 掩膜， 包括： 将所述模特模板的身体图相对应的关键点特征图与所述服装变换图像构造为变装图 像信息； 将所述变换图像信 息输入预设的图像分割 模型进行图像分割， 预测出所述服装变换图 像调整到所述身体图上相对应的服装 掩膜。 5.根据权利要求4所述的模特图像生成方法， 其特征在于， 根据 所述服装掩膜将所述服 装变换图像合成到所述身体图中， 获得模特着装图像， 包括： 根据所述服装掩膜修正所述服装变换图像， 并将服装变换图像合成到所述模特模板中 的模特的身体图中， 获得初步着装图像； 采用所述模特模板中的发型图和躯 干图修正所述初步着装图像， 获得体态修 正图像； 将所述体态修正图像作为前景与所述模特模板中的背景图相合成， 获得模特着装图 像。 6.根据权利要求3所述的模特图像生成方法， 其特征在于， 获取所述人物着装图像的原权　利　要　求　书 1/2 页 2 CN 115512085 A 2始服装图像及关键点特 征图构造为用户输入信息之前， 包括： 对所述人物着装图像进行图像分割， 获得其中的原 始服装图像； 采用图像修复模型修复所述人物着装图像中的原 始服装图像的被遮挡部位。 7.根据权利要求1至6中任意一项所述的模特图像生成方法， 其特征在于， 获取人物着 装图像， 包括： 读取摄像装置产生的预览视频流， 对其中每个图像帧进行人体识别， 将包含人体图像 的图像帧确定为人物图像； 采用人体关键点检测模型确定每个人物图像中的关键点特征图， 将所述关键点特征图 与模特图库中的模特模板的身体图的关键点特 征图计算语义相似度； 当所述人物图像所获得的最高语义相似度超过预设阈值 时， 将该人物图像确定为所述 人物着装图像。 8.一种模特图像生成装置， 其特 征在于， 包括： 图像获取模块， 设置为获取 人物着装图像； 模板召回模块， 设置为从模特图库中召回与所述人物着装图像中的人体具有相似姿态 的模特模板， 所述模特模板包括模特的身体图； 形变求取模块， 设置为确定所述人物着装图像中的原始服装图像相对于所述身体图的 形变特征参数， 根据所述形变特 征参数变换 所述原始服装图像， 获得服装变换图像； 掩膜生成模块， 设置为根据 所述服装变换图像与 所述身体图预测出所述身体图相对应 的服装掩膜； 图像合成模块， 设置为根据所述服装掩膜将所述服装变换图像合成到所述身体图中， 获得模特着装图像。 9.一种模特图像生成设备， 包括中央处理器和存储器， 其特征在于， 所述中央处理器用 于调用运行存储于所述存储器中的计算机程序以执行如权利要求1至7中任意一项所述的 方法的步骤。 10.一种非易失性可读存储介质， 其特征在于， 其以计算机可读指令的形式存储有依据 权利要求1至7中任意一项所述的方法所实现的计算机程序， 所述计算机程序被计算机调用 运行时， 执 行相应的方法所包括的步骤。权　利　要　求　书 2/2 页 3 CN 115512085 A 3