社区
脚本语言
帖子详情
自然语言处理-错字识别(基于Python)kenlm、pycorrector 报错bug求助
76人魔术师
2020-09-02 11:49:06
安装完kenlm、pycorrector包后,开始自动下载语料包,下载完后报这个错误:
求大神帮看看!!!谢谢!!
好像是内存问题
...全文
650
4
打赏
收藏
自然语言处理-错字识别(基于Python)kenlm、pycorrector 报错bug求助
安装完kenlm、pycorrector包后,开始自动下载语料包,下载完后报这个错误: 求大神帮看看!!!谢谢!! 好像是内存问题
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
qq_42786862
2021-02-04
打赏
举报
回复
哦不对 你这个是内存不够 kenlm语言模型zh_giga.no_cna_cmn.prune01244.klm文件是2.8G,你这没那么多内存分配给它
qq_42786862
2021-02-04
打赏
举报
回复
kenml依赖是不是没装啊
76人魔术师
2020-09-02
打赏
举报
回复
顶顶顶顶顶!
tianfang
2020-09-02
打赏
举报
回复
分配2.9G内存 失败
Python
-
pycor
rec
tor
中文错别字纠正工具音似形似
错字
或变体字纠正
中文错别字纠正工具。音似、形似
错字
(或变体字)纠正,可用于中文拼音、笔画输入法的错误纠正。...
pycor
rec
tor
依据语言模型检测错别字位置,通过拼音音似特征、笔画五笔编辑距离特征及语言模型困惑度特征纠正错别字。
pycor
rec
tor
:
pycor
rec
tor
is a toolkit for text error correction. 文本纠错,
Kenlm
,Seq2Seq_Attention,BERT,MacBERT,ELECTRA,ERNIE,Transformer等模型实现,开箱即用
| 简体中文 ...当然,针对不同业务场景,这些问题并不一定全部存在,比如输入法中需要处理前四种,搜索引擎需要处理所有类型,语音
识别
后文本纠错只需要处理前两种, 其中'形似字错误'主要针对五笔或者笔画手
python
-string-similarity:使用
Python
实现不同的字符串相似度和距离度量的库
python
字符串相似度 tdebatty likeity的
Python
3.x实现 一个实现不同字符串相似度和距离度量的库。 当前实现了十二种算法(包括Levenshtein编辑距离和同级,Jaro-Winkler,最长公共子序列,余弦相似性等)。 查看...
(基于
python
的毕业设计)基于深度学习的web端多格式纠错系统(源码+说明+演示视频).zip
(基于
python
的毕业设计)深度学习的web端多格式纠错系统(源码+说明+演示视频),本科毕业设计高分项目。 【项目技术】
python
+Django+mysql 【实现功能】 本系统的开发主要用到了
python
和深度学习技术进行开发,实现...
基于
python
深度学习的web端多格式纠错系统源码.zip
python
项目,仅供学习使用! 基于深度学习的web多格式纠错系统,可以帮助用户在最短的时间内,查找出句子或文本当中的错别字以及错误的格式。本系统的开发主要用到了
python
和深度学习技术进行开发,实现文本纠错、...
脚本语言
37,720
社区成员
34,239
社区内容
发帖
与我相关
我的任务
脚本语言
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
复制链接
扫一扫
分享
社区描述
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
试试用AI创作助手写篇文章吧
+ 用AI写文章