[发明专利]一种基于多基模型框架的文本分类方法有效
申请号: | 201910378450.7 | 申请日: | 2019-05-08 |
公开(公告)号: | CN110162629B | 公开(公告)日: | 2021-05-14 |
发明(设计)人: | 沈雅婷;左志新 | 申请(专利权)人: | 南京理工大学紫金学院 |
主分类号: | G06F16/35 | 分类号: | G06F16/35 |
代理公司: | 南京锐恒专利代理事务所(普通合伙) 32506 | 代理人: | 刘佳伟 |
地址: | 210046 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于多基模型框架的文本分类方法,包括:1)对输入的数据进行预处理;2)对步骤(1)处理完的训练数据进行fastText(快速文本分类算法)训练并评估进行参数调优,得出两组以参数word_ngrams(N元模子)为1和2的最优fastText参数;3)打乱步骤(1)处理完的训练数据生成15个训练样本并使用步骤(2)产生的2组参数分别对其进行7次fastText训练,产生14个模型,再随机的使用步骤(2)产生的2组参数进行fastText训练,产生1个模型,最终得到15个以fastText模型为基模型的最终多基模型;4)使用步骤(3)中得到的多基模型,对步骤(1)处理完的测试数据进行预测,采用投票机制得到最终的文本预测标签。本发明具有训练速度快,准确度高,预测效率高等特点。 | ||
搜索关键词: | 一种 基于 模型 框架 文本 分类 方法 | ||
【主权项】:
1.一种基于多基模型框架的文本分类方法,其特征在于,所述方法包括以下步骤:步骤1:对文本数据进行预处理;步骤2:对步骤1处理完的训练数据进行fastText训练并评估进行参数调优,得出两组以参数word_ngrams为1和2的最优fastText参数;步骤3:打乱步骤1处理完的训练数据生成15个训练样本并使用步骤2产生的2组参数分别对其进行7次fastText训练,产生14个模型,再随机的使用步骤2产生的2组参数进行fastText训练,产生1个模型,最终得到15个以fastText模型为基模型的最终多基模型;步骤4:使用步骤3中得到的多基模型,对步骤1处理完的测试数据进行预测,采用投票机制得到最终的文本预测标签。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京理工大学紫金学院,未经南京理工大学紫金学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910378450.7/,转载请声明来源钻瓜专利网。
- 上一篇:一种内容识别方法及装置
- 下一篇:一种文本去重的方法、装置及设备