关于NLPIR中文分词系统java版的使用

♪生活有点甜 2017-03-30 04:17:08

小弟最近在做毕设，用到了NLPIR中文分词系统java版，经过几天的研究和使用能对一段文字进行初步的分词了，然后我遇到了一个很大的问题，就是怎么对停用词进行过滤和计算词频，查看API文档发现时C语言写的，小弟十分迷茫，希望在这方面有研究的大神指点一下

...全文

882 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

前言：这几天数据挖掘的大作业又用到分词了，首先想到的肯定是中科院的分词系统NLPIR，但是之前用的事2013版的，2015版的有了新的变化。增加了函数和效率自是不必说，由于我是用的java，所以必须使用NLPIR的java接口，NLPIR提供了一个jna的jar包，其实确切来说是打包成了一个bundle，可见NLPIR非常有雄心，以后也必定有更多的功能bundle。此外，新版的

原文：http://blog.csdn.net/k21325/article/details/53052855摘要：为解决中文搜索的问题，最开始使用PHP版开源的SCWS，但是处理人名和地名时，会出现截断人名地名出现错误。开始使用NLPIR分词，在分词准确性上效果要比SCWS好。本文介绍如何在windows系统下编译Java，生成可以执行的jar文件。NLPIR的下载地址：GitHub的地址：两...

自然言的处理的第一步是分词。近期使用了中科院分词系统NLPIR/ICTCLAS 2016。在2014版本以及之前称为ICTCLAS，之后的版本都更名为NLPIR。新版简介如下：词法分析是自然语言处理的基础与关键。张华平博士在多年研究工作积累的基础上，研制出了 NLPIR 分词系统，主要功能包括中文分词；英文分词；词性标注；命名实体识别；

文本自动分词

昨天接到经理的安排，让我做项目中的分词模块并介绍说可以使用中科院的ICTCLAS（最新版本改名为NLPIR）中文分词系统。于是自己花了一下午的时间来了解它，并试着搭建测试环境；这方面的资料比较少，幸好使用起来并不复杂，借助着搜索引擎的帮助，终于在官方文档以及网络博客的帮助下弄明白了其Java接口的使用方法。参考资源： http://blog.csdn.net/hellonlp/art

1,151

社区成员

244

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章