standard download
文库搜索
切换导航
首页
频道
仅15元无限下载
联系我们
问题反馈
首页
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211360818.5 (22)申请日 2022.11.02 (71)申请人 北京亿赛 通科技发展 有限责任公司 地址 100085 北京市海淀区西二 旗大街39 号4层401 (72)发明人 郭振涛 梁金千 崔培升 (74)专利代理 机构 北京千壹知识产权代理事务 所(普通合伙) 11940 专利代理师 王玉玲 (51)Int.Cl. G06F 16/35(2019.01) G06F 16/335(2019.01) G06F 16/36(2019.01) G06F 16/31(2019.01) G06F 16/33(2019.01) (54)发明名称 文本分类方法、 装置、 电子设备及存 储介质 (57)摘要 本发明涉及信息处理技术领域, 提供了一种 文本分类方法、 装置、 电子设备及存储介质, 该方 法包括获取新输入文本; 根据增量选择策略, 筛 选新输入文本得到增量样本, 其中增量选择策略 与新输入文本的类别概率分布相关, 新输入文本 的类别概率分布通过预先训练的分类模型进行 预测获得; 根据增量样本的类别, 更新分类模型 的参数。 采用本发明的文本分类方法, 能够对新 输入文本进行增量学习分类, 与时俱进, 灵活性 强, 同时准确率高。 权利要求书2页 说明书7页 附图3页 CN 115408527 A 2022.11.29 CN 115408527 A 1.一种文本分类方法, 其特 征在于, 所述方法包括: 获取新输入文本; 根据增量选择策略, 筛选所述新输入文本得到增量样本, 其中所述增量选择策略与所 述新输入文本的类别概率分布相关, 所述新输入文本的类别概率分布通过预先训练的分类 模型进行 预测获得; 根据所述增量样本的类别, 更新所述分类模型的参数。 2.根据权利要求1所述的文本分类方法, 其特征在于, 所述根据增量选择策略, 筛选所 述新输入文本得到增量样本, 包括: 计算所述 新输入文本对应各类别的概 率; 当所述各类别的概率中存在一个类别的概率大于剩余类别的概率之和的预设倍数时, 将所述新输入文本作为所述增量样本 。 3.根据权利要求1所述的文本分类方法, 其特征在于, 所述根据所述增量样本的类别, 更新所述分类模型的参数, 包括: 检测所述增量样本的类别与 所述分类模型的类别是否相同, 以及所述分类模型的特征 词是否属于所述增量样本; 基于检测结果对所述分类模型的类别概 率和特征词概率进行更新。 4.根据权利要求3所述的文本分类方法, 其特征在于, 所述基于检测结果对所述分类模 型的类别概 率和特征词概率进行更新, 包括: 其中, 表示所有类别的文本总 数, 而文本数量的更新为N=N+1; 表示类别 的所 有文本中所有特征词的词频总和; 表示增量样本 中出现的所有词的词频总和; 表示特征词 在增量样本 中的词频; 为增量样本 的预测类别。 5.根据权利要求1至4中任意一项所述的文本分类方法, 其特征在于, 所述预先训练的 分类模型通过如下步骤得到:权 利 要 求 书 1/2 页 2 CN 115408527 A 2获取文本数据集; 对所述文本数据集进行 预处理, 获得词汇 表; 根据所述词汇表中的特征词, 构建向量空间模型以将文本数据转化为向量, 并进行训 练得到所述分类模型。 6.根据权利要求5所述的文本分类方法, 其特征在于, 所述根据所述词汇表中的特征 词, 构建向量空间模型以将文本数据转 化为向量之前, 还 包括: 根据所述特 征词的词频和逆文件频率, 计算所述特 征词的权 重; 根据所述特 征词的权 重, 对所述特 征词进行排序筛 选。 7.根据权利要求5所述的文本分类方法, 其特征在于, 所述分类模型包括朴素贝叶斯分 类模型。 8.一种文本分类装置, 其特 征在于, 所述装置包括: 获取模块, 用于获取新输入文本; 筛选模块, 用于根据增量选择策略, 筛选所述新输入文本得到增量样本, 其中所述增量 选择策略与所述新输入文本的类别概率分布相关, 所述新输入文本的类别概率分布通过预 先训练的分类模型进行 预测获得; 更新模块, 用于根据所述增量样本的类别, 更新所述分类模型的参数。 9.一种电子设备, 其特征在于, 所述电子设备包括处理器和存储器, 所述存储器中存储 有至少一段程序、 代码集或指 令集, 所述程序、 所述代码集或所述指 令集由所述处理器加载 并执行以实现权利要求1至7中任意 一项所述的文本分类方法的步骤。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质存储有一个或者 多个程序, 所述一个或者多个程序可被一个或者多个处理器执行, 以实现权利要求1至7中 任意一项所述的文本分类方法的步骤。权 利 要 求 书 2/2 页 3 CN 115408527 A 3
专利 文本分类方法、装置、电子设备及存储介质
文档预览
中文文档
13 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共13页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 SC 于
2024-02-24 00:45:06
上传分享
举报
下载
原文档
(546.9 KB)
分享
友情链接
GB-T 41800-2022 信息技术 传感器网络 爆炸危险化学品贮存安全监测系统技术要求.pdf
GB-T 31506-2015 信息安全技术 政府门户网站系统安全技术指南.pdf
GB-T 32673-2016 架空输电线路故障巡视技术导则.pdf
DB34-T 3433.2-2019 计量检测数据信息 第 2 部分:采集规范 安徽省.pdf
GB-T 35392-2017 无损检测 电导率电磁 涡流 测定方法.pdf
T-CSAE 236—2021 质子交换膜燃料电池发动机 台架可靠性试验方法.pdf
GM-T 0100-2020 人工确权型数字签名密码应用技术要求.pdf
DB37-T 3444-2018 学生资助服务规范 山东省.pdf
GB-T 13917.9-2009 农药登记用卫生杀虫剂室内药效试验及评价 第9部分:驱避剂.pdf
GB-T 39590.1-2020 机器人可靠性 第1部分:通用导则.pdf
思度安全-DSMM-005 数据安全需求分析管理规范V1.0.pdf
GB-T 22080-XXXX ISO IEC 27001 2022 信息安全技术 信息安全管理体系 要求.pdf
GB-T 43221-2023 无人飞艇飞行控制系统通用要求.pdf
付晓岩 数字银行论坛-以企业架构推动数字化 转型指导文件的落实 .pdf
GB-T 29119-2023 煤层气资源勘查技术规范.pdf
T-QAAM 003—2023 智能网联汽车道路测试与示范应用安全管理要求.pdf
SY-T 7305-2021 连续油管作业技术规程.pdf
GB-T 34575-2017 电力机车辅助变流器.pdf
T-CSAE 262—2022 电动汽车电池管理系统用故障注入测试规范.pdf
aigc安全研究分享.pdf
1
/
13
评价文档
赞助2.5元 点击下载(546.9 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。