根据QQ群进行分词搜索

尹成学院 2023-01-13 01:38:23

课时名称	课时知识点
根据QQ群进行分词搜索	根据QQ群进行分词搜索

...全文

80 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

VicWord 一个纯php的分词 QQ交流群: 731475644 安装 composer require lizhichao/word 分词说明含有3种切分方法 getWord 长度优先切分。最快 getShortWord 细粒度切分。比最快慢一点点 getAutoWord 自动切分。效果最好可自定义词典，自己添加词语到词库，词库支持文本格式json和二级制格式igb 二进制格式词典小，加载快 dict.igb含有175662个词，欢迎大家补充词语到 dict.txt ，格式(词语 \t idf \t 词性) idf 获取方法百度搜索这个词语 Math.log(100000001/结果数量)，如果你有更好的方法欢迎补充。词性 [标点符号,名词,动词,形容词,区别词,代词,数词,量词,副词,介词,连词,助词,语气词,拟声词,叹词] 取index ；标点符号取0 三种分词结果

首先感谢jieba分词原作者[[https://github.com/fxsjy][fxsjy]]，没有他的无私贡献，我们也不会结识到结巴分词，更不会有现在的java版本。结巴分词的原始版本为python编写，目前该项目在github上的关注量为170，打星727次（最新的数据以原仓库为准），Fork238次，可以说已经有一定的用户群。结巴分词(java版)只保留的原项目针对搜索引擎分词的功能(cut_for_index、cut_for_search)，词性标注，关键词提取没有实现(今后如用到，可以考虑实现)。

1、Microsoft.Bussines.CommonProxy.dll 框架核心API库包括：常用加密解密，缓存集群，IP地址库，Html Parse，金额转换，GoogleMap Api，Google PR，ImageMagick(图片处理)，SharpZipLib压缩解压缩，中文分词核心库 2、WebSystem.Framework.dll 框架核心API库包括：与Discuz相关的集成登陆，Evaluator计算表达式，Excel相关处理，Pdf处理，Msmq消息队列处理，ThreadPool(线程池,用于并发处理) 3、FrameWork.Extension.Toolkit.dll 针对DotNet基类扩展方法核心库 4、WebSystem.Framework.DAO.dll 数据访问层核心库：包括 DbHelperSQL，MySqlDbHelper，AccessDbHelper，实体层，数据库连接池等 5、WebSystem.WebControls.dll 常用服务器控件核心库主要提供后台开发使用 6、Business.Processing.dll 业务处理核心类库(定义前后台业务处理基类，支付，手机短信，序列号，用户等级，查询中心，报表处理中心等) 2.0新增加了 1、WebSystem.FrameWork.SearchEngine.dll 搜索引擎核心处理类库(提供并行中文分词、分布式并行采集器) 增加集成了中科院中文分词和盘古中文分词，并进行了并行改进，大大提高了分词性能 2、另外WebSystem.WebControls.dll 中新增加了100多个各类AJAX控件，另外集成并改写了全套extjs库，同时提供了一个WEB ERP的DEMO 3、另外在WebSystem.Framework.DAO.dll 数据访问层核心库，中增加了对Oracle、Sqlite、的处理功能，对所有的数据访问层的CRUD均增加了相关的 XML处理功能也就是说所有的CRUD操作只要提供对应的实体和对应的XML数据即可比如： ///

/// 通过入Object的主键做为删除主键为keys 的xml数据,删除后在重新插入xml中的数据 ///

/// 实体对象 /// xml数据 /// 主键列表 /// public List GetDeleteAndInsertXmlSql(Object o, string xml, List keys) 4、增加集成了盘古中文分词更多范例请参考 http://hi.baidu.com/earthsearch 注:使用范例时:请先引用所有的DLL类库有任何疑问请与我本人联系 QQ 99923309 QQ群:

整合资源、集成应用、共享信息、统一标准、协同机制是网站群构建的基本要素。

尹成的课程社区_NO_2

1

社区成员

1,571

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章