求汉语文本分词算法

ZengXi 2003-07-29 04:49:08
一段汉字文本,如何从中提取有意义的词汇呢?谢谢
如果要用到词库,请告诉如何获取一个比较好的词库
...全文
37 6 打赏 收藏 转发到动态 举报
写回复
用AI写文章
6 条回复
切换为时间正序
请发表友善的回复…
发表回复
g622 2003-08-21
  • 打赏
  • 举报
回复
这个现在一般都是利用
常用词库匹配+停用词分析(例如介词、虚词等)
结合做的
jiangchun_xn 2003-07-30
  • 打赏
  • 举报
回复
好想还要有简单的文法分析吧
smallmilk 2003-07-30
  • 打赏
  • 举报
回复
去北大的语言研究室去看看吧,没准会有好的收获!
zzwu 2003-07-30
  • 打赏
  • 举报
回复
UCDOS的词库我利用过,虽然比不上微软的,但比较方便,可以用用了.
BlueSky2008 2003-07-29
  • 打赏
  • 举报
回复
是要用词库的。不过操作系统本身好像是没有词库的,词库都是输入法自带的。
我觉得紫光拼音的词库好像不错,匹配的准确率满高的。要是能弄清它的词库的格式,把它导出来就行了。
zzwu 2003-07-29
  • 打赏
  • 举报
回复
中文操作系统都带有一定的词库,否则输入拼音时怎么能联想出一大堆词汇来呢?

33,008

社区成员

发帖
与我相关
我的任务
社区描述
数据结构与算法相关内容讨论专区
社区管理员
  • 数据结构与算法社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧