(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211496854.4 (22)申请日 2022.11.28 (71)申请人 北京红棉小 冰科技有限公司 地址 100080 北京市海淀区北四环西路67 号6层608房间 (72)发明人 刘剑锋　王宝元　 (74)专利代理 机构 北京路浩知识产权代理有限 公司 11002 专利代理师 王治东 (51)Int.Cl. G06T 11/60(2006.01) G06F 16/535(2019.01) G06F 16/583(2019.01) G06F 16/33(2019.01) G06F 16/35(2019.01) (54)发明名称 一种文本 配图方法及装置 (57)摘要 本发明提供一种文本配图方法及装置。 该方 法包括： 获取待配图的文本数据； 将文本数据输 入到情绪关键词组提取模型， 获得情绪关键词组 提取模型输出的情绪关键词组； 其中， 情绪关键 词组提取模 型是基于社交样本数据、 社交样本数 据对应的情绪分类标签进行训练得到的情绪分 类模型； 生成情绪关键词组的文本查询请求， 基 于文本查询请求到开放域图片库进行查询， 获得 第一图片； 确定文本数据的文本向量； 生成文本 向量的向量查询请求， 基于向量查询请求到本地 图片向量库进行查询， 获得第二图片； 对第一图 片和第二图片进行重排， 输出目标配图。 本发明 提供的文本配图方法， 能够为社交领域的文本数 据进行在 线自动配图， 提高了社交领域的文本配 图效率和精确度。 权利要求书2页 说明书9页 附图3页 CN 115546355 A 2022.12.30 CN 115546355 A 1.一种文本配图方法， 其特 征在于， 包括： 获取待配图的文本数据； 将所述文本数据输入到情绪关键词组提取模型， 获得所述情绪关键词组提取模型输出 的情绪关键词组； 其中， 所述情绪关键词组提取模 型是基于社 交样本数据、 所述社交样 本数 据对应的情绪分类标签进行训练得到的； 基于所述情绪关键词组到开放域图片库进行查 询， 获得第一图片； 确定所述文本数据的文本向量； 生成所述文本向量的向量查询请求， 基于向量查询请 求到本地图片向量库进行查询， 获得第二图片； 对所述第一图片和所述第二图片进行重排， 输出目标配图。 2.根据权利要求1所述的文本配图方法， 其特征在于， 所述确定所述文本数据的文本向 量， 具体包括： 将所述文本数据输入到文本编码模型， 获得所述文本编码模型输出的文本向量； 其中， 所述文本编 码模型为基于样本社交文本数据、 所述样本社 交文本数据对应的编 码向量结果 进行训练得到的。 3.根据权利要求1所述的文本配图方法， 其特征在于， 所述对所述第 一图片和所述第 二 图片进行重排， 输出目标配图， 具体包括： 基于融合编码模型和图片美感评分模型， 对所述第 一图片和所述第 二图片进行加权得 分， 根据加权得分结果进行重排， 获得图片重排结果； 根据图片重排结果， 确定目标配图； 其中， 所述融合编码模型是融入情绪特征及语义特征的模型； 所述图片美感评分模型 是基于样本图片以及所述样本图片对应的美感评分结果进行训练得到的。 4.根据权利要求1所述的文本配图方法， 其特征在于， 基于向量查询 请求到本地图片向 量库进行查询， 获得第二图片， 具体包括： 基于所述向量查询请求将所述文本向量与所述本地图片向量库中候选图片的向量进 行相似度计算， 将相似度达 到或超过 预设相似度阈值的多张图片确定为所述第二图片。 5.根据权利要求1所述的文本配图方法， 其特征在于， 获取待配图的文本数据， 具体包 括： 获取用户输入的待配图的社交文本数据， 以及获取所述用户的个性化用户数据； 对所 述社交文本数据和所述个性 化用户数据进行拼接， 得到所述文本数据。 6.根据权利要求1所述的文本配图方法， 其特征在于， 将所述文本数据输入到情绪关键 词组提取模型， 获得 所述情绪关键词组提取模型输出的情绪关键词组， 具体包括： 判断所述文本数据的长度是否大于或等于预设的长度阈值， 在所述文本数据的长度 大 于或等于所述长度阈值的情况下， 将所述文本数据输入到情绪关键词组提取模型进行情绪 分类， 并根据文本数据里 的每个词对分类标签的影响权重， 提取出文本数据的情绪关键词 组。 7.根据权利要求6所述的文本配图方法， 其特 征在于， 在所述文本数据的长度小于所述长度阈值的情况下， 基于所述文本数据生成相应的文 本查询请求， 基于所述文本查询请求到开 放域图片库中进行查询， 获得第三图片； 所述方法， 还 包括： 对所述第一图片、 所述第二图片以及所述第三图片进行重排， 输出相应的目标配图。权　利　要　求　书 1/2 页 2 CN 115546355 A 28.一种文本配图装置， 其特 征在于， 包括： 数据获取 单元， 用于获取待配图的文本数据； 第一图片确定单元， 用于将所述文本数据输入到情绪关键词组提取模型， 获得所述情 绪关键词组提取模型输出 的情绪关键词组； 其中， 所述情绪关键词组提取模型是基于社交 样本数据、 所述社交样本数据对应的情绪分类标签进行训练得到的； 基于所述情绪关键词 组到开放域图片库进行查询， 获得第一图片； 第二图片确定单元， 用于确定所述文本数据的文本向量； 生成所述文本向量的向量查 询请求， 基于向量 查询请求到 本地图片向量库进行查询， 获得第二图片； 目标配图确定单 元， 用于对所述第一图片和所述第二图片进行重排， 输出目标配图。 9.一种电子设备， 包括存储器、 处理器以及存储在存储器上并可在处理器上运行的计 算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求1至7任意一项 所述的文本配图方法的步骤。 10.一种处理器可读存储介质， 所述处理器可读存储介质上存储有计算机程序， 其特征 在于， 该计算机程序被处理器执行时实现如权利要求 1至7任意一项 所述的文本配图方法的 步骤。权　利　要　求　书 2/2 页 3 CN 115546355 A 3