mahout训练贝叶斯模式分类准确率不高

编程原理 2013-10-22 09:43:09
mahout训练贝叶斯模式分类准确率不高,如下图,在剔除一个训练样本数据后,准确率提升两个百分点,证明剔除掉的一个样本对其他样本分类产生影响,有什么办法提高贝叶斯模型分类的准确率呢?

剔除样本women-clothing样本后的训练结果如下图:
...全文
612 5 打赏 收藏 转发到动态 举报
写回复
用AI写文章
5 条回复
切换为时间正序
请发表友善的回复…
发表回复
beowulf2005 2013-11-01
  • 打赏
  • 举报
回复
几千个数据动用hadoop,嗯,杀鸡用牛刀,费电不? 你这数据量乘以10的6次方以后再整hadoop吧。
spmydl 2013-11-01
  • 打赏
  • 举报
回复
能问问 您在 20-news的基础上做了哪些改动
编程原理 2013-10-23
  • 打赏
  • 举报
回复
增加测试数据后结果一样的,增加样本会增加其词频出现的不确定性,主要是现在样本是用庖丁词库分词的,对于服装领域庖丁分词不够精致,造成构造训练样本的时候分类不够精准,所以训练出来的模型总会有误差,现在关键要能得到训练模型的日志,在分类的时候能够找出分错位置的样本文本,这样把错误的文本剔除掉应该就能提高模型的准确率了,问题就在,怎么找出分错位置的文本
kissstefani 2013-10-22
  • 打赏
  • 举报
回复
学习,下个月会用到。
撸大湿 2013-10-22
  • 打赏
  • 举报
回复
1、增加样本数据量,感觉你的样本量太少 2、增加测试次数

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧