文库搜索
切换导航
首页
频道
联系我们
国家标准目录
国际ISO标准目录
行业标准目录
地方标准目录
首页
联系我们
国家标准目录
国际ISO标准目录
行业标准目录
地方标准目录
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211250816.0 (22)申请日 2022.10.12 (71)申请人 京东科技信息技 术有限公司 地址 100176 北京市大兴区北京经济技 术 开发区科创十一街18号院2号楼6层 601 (72)发明人 赵宇明 刘瑞雪 陈蒙 (74)专利代理 机构 北京路浩知识产权代理有限 公司 11002 专利代理师 王治东 (51)Int.Cl. G06F 40/242(2020.01) G06F 40/117(2020.01) G06F 40/279(2020.01) G06F 16/36(2019.01) (54)发明名称 数据处理方法、 装置、 设备、 介质及产品 (57)摘要 本公开提供一种数据处理方法、 装置、 设备、 介质及产品, 方法包括: 获取至少一条待处理数 据; 分割每条所述待处理数据, 得到至少一个待 使用数据; 确定每个所述待使用数据在预设词典 中对应的词典标识, 得到词典标识集合; 确定与 所述词典标识集合对应的上下文感知数据和候 选实体数据; 融合所述上下文感知数据和所述候 选实体数据, 得到目标数据。 本公开用以解决现 有技术中的意图识别准确度低的缺陷, 实现精准 的识别当前问题的意图。 权利要求书3页 说明书13页 附图3页 CN 115470775 A 2022.12.13 CN 115470775 A 1.一种数据处 理方法, 其特 征在于, 包括: 获取至少一条待处 理数据; 分割每条 所述待处 理数据, 得到 至少一个待 使用数据; 确定每个所述待 使用数据在预设词典中对应的词典标识, 得到词典标识集 合; 确定与所述词典标识集 合对应的上 下文感知数据和候选实体数据; 融合所述上 下文感知数据和所述 候选实体数据, 得到目标 数据。 2.根据权利要求1所述的数据处理方法, 其特征在于, 所述分割每条所述待处理数据, 得到至少一个待 使用数据, 包括: 基于字粒度分割策略, 分割所述每条待处 理数据, 得到 至少一个第一分割数据; 基于词粒度分割策略, 分割所述每条待处 理数据, 得到 至少一个第二分割数据; 将所述第一分割数据和所述第二分割数据的并集作为所述待 使用数据。 3.根据权利要求2所述的数据处理方法, 其特征在于, 所述确定每个所述待使用数据在 预设词典中对应的词典标识, 得到词典标识集 合, 包括: 将每个所述第一分割数据在所述预设词典中进行匹配, 得到第一匹配结果; 将所述第 一匹配结果在所述预设词典中对应的第一词典标识作为第一词典标识子集 合; 将每个所述第二分割数据在所述预设词典中进行匹配, 得到第二匹配结果; 将所述第 二匹配结果在所述预设词典中对应的第二词典标识作为第二词典标识子集 合; 组合所述第一词典标识子集 合和所述第二词典标识子集 合, 得到所述词典标识集 合。 4.根据权利要求3所述的数据处理方法, 其特征在于, 所述确定与所述词典标识集合对 应的上下文感知数据, 包括: 确定每个所述第一词典标识对应的第一向量, 得到第一文本表征矩阵; 确定每个所述第二词典标识对应的第二向量, 得到第二文本表征矩阵; 将所述第一文本表征矩阵输入上下文感知模型, 得到所述上下文感知模型输出的第 一 感知数据, 以及将所述第二文本表征矩阵输入所述上下文感知模型, 得到所述上下文感知 模型输出的第二感知数据; 组合所述第一感知数据和所述第二感知数据, 得到所述上 下文感知数据; 其中, 所述上 下文感知模型基于文本表征矩阵样本和上 下文感知数据样本训练得到 。 5.根据权利要求3所述的数据处理方法, 其特征在于, 所述确定与所述词典标识集合对 应的候选实体数据, 包括: 将所述词典标识集合输入实体候选模型, 得到所述实体候选模型输出的所述候选实体 数据; 其中, 所述实体候选模型基于词典标识集 合样本和候选实体数据样本训练得到 。 6.根据权利要求5所述的数据处理方法, 其特征在于, 所述融合所述上下文感知数据和 所述候选实体数据, 得到目标 数据, 包括: 基于所述候选实体数据, 从所述第一感知数据中提取第一目标感知数据, 以及从第二 感知数据中提取第二目标感知数据; 将所述第一目标感知数据、 第二目标感知数据和所述候选实体数据输入预设计算公 式, 得到所述预设计算公式输出的第一表征感知数据和第二表征感知数据; 分别对所述第 一表征感知数据和所述第 二表征感知数据进行池化操作, 得到第 一池化权 利 要 求 书 1/3 页 2 CN 115470775 A 2感知数据和第二池化感知数据; 拼接所述第一池化感知数据和所述第二池化感知数据, 得到所述目标 数据。 7.根据权利要求6所述的数据处理方法, 其特征在于, 所述将所述第一目标感知数据、 第二目标感知数据和所述候选实体数据输入预设计算 公式, 得到所述预设计算公式输出的 第一表征感知数据和第二表征感知数据, 包括: 将所述第一目标感知数据、 第 二目标感知数据和所述候选实体数据输入所述第 一预设 计算子公式, 得到所述第一预设计算子公式输出的注意力权 重矩阵; 将所述第一目标感知数据、 第二目标感知数据、 所述候选实体数据和所述注意力权重 矩阵输入第二预设计算子公式, 得到所述第二预设计算子公式输出的新的所述第一目标感 知数据、 新的所述第二目标感知数据和新的所述 候选实体数据; 将所述新的第 一目标感知数据、 所述新的第 二目标感知数据和所述新的候选实体数据 输入第三预设计算子公式, 得到所述第三预设计算子公式输出的所述第一表征感知数据和 所述第二表征感知数据。 8.根据权利要求1 ‑7任一项所述的数据处理方法, 其特征在于, 所述确定每个所述待使 用数据在预设词典中对应的词典标识, 得到词典标识集 合之前, 还 包括: 获取所述待使用数据的数据长度信息; 在确定所述数据长度信 息大于预设值的情况下, 从所述待使用数据中提取所述数据长 度信息为所述预设值的目标待 使用数据, 将所述目标待 使用数据作为所述待 使用数据; 在确定所述数据长度信 息小于或等于所述预设值的情况下, 执行所述确定每个所述待 使用数据在预设词典中对应的词典标识, 得到词典标识集 合的步骤。 9.根据权利要求1 ‑7任一项所述的数据处理方法, 其特征在于, 所述获取至少一条待处 理数据之后, 还 包括: 获取与所述待处 理数据对应的真实意图, 其中, 所述真实意图通过用户设置得到; 所述融合所述上 下文感知数据和所述 候选实体数据, 得到目标 数据之后, 还 包括: 预测所述目标 数据对应的预测意图; 在所述真实意图和所述预测意图的一致率大于预设值的情况下, 确定所述目标数据合 格。 10.一种数据处 理装置, 其特 征在于, 包括: 获取模块, 用于获取至少一条待处 理数据; 分割模块, 用于分割每条 所述待处 理数据, 得到 至少一个待 使用数据; 第一确定模块, 用于确定每个所述待使用数据在预设词典中对应的词典标识, 得到词 典标识集 合; 第二确定模块, 用于确定与所述词典标识集合对应的上下文感知数据和候选实体数 据; 融合模块, 用于融合所述上 下文感知数据和所述 候选实体数据, 得到目标 数据。 11.一种电子设备, 包括存储器、 处理器及存储在存储器上并可在处理器上运行的计算 机程序, 其特征在于, 所述处理器执行所述程序时实现如权利要求1至9任一项所述的数据 处理方法。 12.一种非暂态计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 该计算机权 利 要 求 书 2/3 页 3 CN 115470775 A 3
专利 数据处理方法、装置、设备、介质及产品
文档预览
中文文档
20 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共20页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-17 23:43:35
上传分享
举报
下载
原文档
(780.8 KB)
分享
友情链接
希赛 2022中级信息安全工程师知识点集锦.pdf
HB 8573-2020 民用飞机机载嵌入式操作系统板级支持软件测试要求.pdf
DB5117-T 75—2023 磷石膏无害化处理技术规范 达州市.pdf
专利 基于人工智能预测的信息安全预测方法及大数据安全系统.PDF
安恒信息-GBT31168-2023 信息安全技术云计算服务安全能力要求 国家标准解读.pdf
GBT 40861-2021 汽车信息安全通用技术要求.pdf
DB43-T 1267-2023 机动车检验机构建设和运行管理规范 湖南省.pdf
腾讯研究院:2024工业大模型应用报告-2024-04-宏观大势.pdf
GB-T 33061.4-2023 塑料 动态力学性能的测定 第4部分 非共振拉伸振动法.pdf
GB-T 7894-2023 水轮发电机基本技术要求.pdf
T-GCHA 1.2—2018 定制家居产品 人造板定制衣柜 第2部分:原材料验收规范.pdf
GM-T 0106-2021 银行卡终端产品密码应用技术要求.pdf
T-SDL 3.5—2021 10 kV智能电缆系统技术规范 第 5 部分 安装与验收规范.pdf
GB-T 15319-1994 火焰加热炉节能监测方法.pdf
GB-T 28032-2011 静电成像墨粉用树脂.pdf
T-SHPPA 022—2023 医药企业ESG信息披露指南.pdf
GB-T 40857-2021 汽车网关信息安全技术要求及试验方法.pdf
GB-T 35659-2017 经济贸易展览会分级与评定准则.pdf
GB-T 30810-2014 水泥胶砂中可浸出重金属的测定方法.pdf
工信部 网络安全产业人才岗位能力要求 2021.pdf
1
/
3
20
评价文档
赞助2元 点击下载(780.8 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
点击进入官方售后微信群
支付 完成后 如未跳转 点击这里下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。