∥∥把分散尽了也要解决这个问题∥∥【全文索引的分词问题】-CSDN论坛

∥∥把分散尽了也要解决这个问题∥∥【全文索引的分词问题】

MS-SQL Server > 疑难问题

收藏回复

[问题点数：100分]

⋅∥∥把分散尽了也要解决这个问题∥∥【全文索引的分词问题】 ⋅★★★重分求助，有好的推荐另外再多加★★★ ⋅临时表和CMP模式的问题，大家帮帮我，顶者有分,分没了再开新帖 更多帖子 关注私信空间博客 coldpanth 等级 本版专家分：0 结帖率 93.33%: 在应用全文索引中遇到了个超奇怪的问题

示例：
数据库表  Table_aaa

Field_ID      Field_MyText
1                a-5900/b
2               vor5900
3                v5900see

Field_MyText为全文索引字段，当查询5900关键字的时候，只会反回第一条记录
以vor为关键字查询的时候不会返回任何记录，以see为关键字也不会有任何记录

也就是说，英文和数字之间，SqlServer并没有进行分词(-和/这样的字符分词没有问题)
此服务器为SqlServer2005  英文版
在其它服务器的SqlServer2000的英文版和中文版搜索均未出现此问题

注：已经清空所有语言的干扰词，语言设置均为简体中文
怀疑是数据库服务器设置问题，望高手给予解答

2007-04-06 18:55:44

点赞只看楼主引用举报楼主收起

展开阅读全文

⋅windows下，拦截并修改IP包的TOS字段，然后发送出去 ⋅两个临时表，把不同字段拼接形成一个单独的表 ⋅同一个表中某一段时间范围内查询具有相同ID的记录和上次记录【急，】 更多帖子 关注私信空间博客 believe209 等级 本版专家分：486: 帮顶!

2007-04-06 20:09:24

点赞只看TA 引用举报 #1得分 0

⋅招人不是个容易的事情，顺便招1-2个.net ⋅SQL server timeout和process memory has been paged out问题 ⋅你去洗澡了么？水里的朋友还好么？ 更多帖子 关注私信空间博客 xiaoku 等级 本版专家分：12816: 没用过 2005 帮顶

2007-04-06 20:16:31

点赞只看TA 引用举报 #2得分 0

⋅大家谈下对于历史数据的处理方式 ⋅增加文件组（表分区）会提高性能吗？有做过的进 ⋅组件间的事务处理机制 更多帖子 关注私信空间博客 duanzhi1984 等级 本版专家分：11913: 现在还在用2000，不好意思啊
2005还每用过

2007-04-06 21:09:10

点赞只看TA 引用举报 #3得分 0

⋅怎样实现局域网内两台oracle数据库同步？ ⋅数据库复制问题 ⋅请教一个关于JOB的问题？ 更多帖子 关注私信空间博客 hxd001_810 等级 本版专家分：2115: 木有用SQL Server 2005
帮LZ顶~

2007-04-07 17:30:14

点赞只看TA 引用举报 #4得分 0

⋅通知:尽最大努力让小F和晴天本月拿牌,本人这个月剩余几天不抢分. ⋅感谢管理员退还我被盗用的另外一千分.谢谢! ⋅感谢管理员退还我的可用分.不过仍有一个疑问. 更多帖子 关注私信空间博客 dawugui 等级 本版专家分：440462 勋章 名人 2019年荣获名人称号 年度总版至少三次排名前十即授予名人勋章 榜眼 2008年总版技术专家分年内排行榜第二 进士 2010年总版技术专家分年内排行榜第四 2009年总版技术专家分年内排行榜第五 2007年总版技术专家分年内排行榜第六 金牌 2009年3月总版技术专家分月排行榜第一 2008年12月总版技术专家分月排行榜第一 2008年3月总版技术专家分月排行榜第一 2007年12月总版技术专家分月排行榜第一 2007年10月总版技术专家分月排行榜第一: select * from Table_aaa where Field_MyText like '%5900%'
select * from Table_aaa where charindex('5900' ,Field_MyText) > 0

这两句查不出来?

2007-04-08 22:12:06

点赞只看TA 引用举报 #5得分 0

⋅SQL问题,请帮忙 ⋅分组求和问题 更多帖子 关注私信空间博客 fzeng554 等级 本版专家分：0: select * from Table_aaa where Field_MyText like '%5900%'

这句应该可以查出你的三条记录,我也用2005

2007-04-12 11:39:26

点赞只看TA 引用举报 #6得分 0

⋅应用程序连接sql server数据库被拒绝 ⋅应用程序连接数据库被拒绝 ⋅请教：全文索引结果不正确的问题，谢谢 更多帖子 关注私信空间博客 cathysun118 等级 本版专家分：7593 勋章 进士 2007年总版技术专家分年内排行榜第四 金牌 2007年6月总版技术专家分月排行榜第一 银牌 2007年5月总版技术专家分月排行榜第二 2007年4月总版技术专家分月排行榜第二 红花 2007年5月 Oracle大版内专家分月排行榜第一 2007年4月 Oracle大版内专家分月排行榜第一: ;D

2007-04-12 11:43:26

点赞只看TA 引用举报 #7得分 0

⋅∥∥把分散尽了也要解决这个问题∥∥【全文索引的分词问题】 ⋅★★★重分求助，有好的推荐另外再多加★★★ ⋅临时表和CMP模式的问题，大家帮帮我，顶者有分,分没了再开新帖 更多帖子 关注私信空间博客 coldpanth 等级 本版专家分：0: 楼上的几位兄弟，我这里必须用全文索引，不是用Like

2007-04-13 15:47:16

点赞只看TA 引用举报 #8得分 0

⋅∥∥把分散尽了也要解决这个问题∥∥【全文索引的分词问题】 ⋅★★★重分求助，有好的推荐另外再多加★★★ ⋅临时表和CMP模式的问题，大家帮帮我，顶者有分,分没了再开新帖 更多帖子 关注私信空间博客 coldpanth 等级 本版专家分：0: 试来试去，怎么试也不行，就差重装SqlServer了

2007-04-18 11:11:47

点赞只看TA 引用举报 #9得分 0

⋅∥∥把分散尽了也要解决这个问题∥∥【全文索引的分词问题】 ⋅★★★重分求助，有好的推荐另外再多加★★★ ⋅临时表和CMP模式的问题，大家帮帮我，顶者有分,分没了再开新帖 更多帖子 关注私信空间博客 coldpanth 等级 本版专家分：0: 版主都哪里去了 T_T

2007-04-18 11:12:46

点赞只看TA 引用举报 #10得分 0

1 2

收起

收藏回复

coldpanth

等级：

关注私信 TA的帖子

java之全文索引搜索lucene之增删改查文档与中文分词搜索: java之全文索引搜索lucene之增删改查文档与中文分词搜索接上文，接下来介绍一个lucene的各种query，然后介绍一下中文全文索引搜索。对于各种query，我就直接上代码了，具体的话，我已经在代码里面注释了，而且...

sql server全文索引，分词: sql全文索引，怎么进行整个数据库的搜索，中文进行分词，可以自己进行分词吗，如何分词，求大神赐教，谢谢！

SQL Server全文索引的个人总结(下)-关于中文分词: 还发现了一个问题：它对中文，是按字分词的，下面我解释一下：比如对'博客堂成员很多是MVP'这句话，假如一个个的字的作索引，会比使用'博客堂','成员',MVP'几个词作索引生成的索引大很多，这样不仅浪费空间，...

MySQL使用全文索引(fulltext index): 1.创建全文索引(FullText index) 旧版的MySQL的全文索引只能用... 不过新版的MySQL5.6.24上InnoDB引擎也加入了全文索引，所以具体信息要随时关注官网， 1.1. 创建表的同时创建全文索引 CREATE TABLE a

ES倒排索引与分词详解: 倒排索引正排索引：文档id到单词的关联关系倒排索引：单词到文档id的关联关系示例：对以下三个文档去除停用词后构造倒排索引 image 倒排索引-查询过程查询包含“搜索引擎”的文档通过倒排索引获得...

Elasticsearch自定义分词，从一个问题说开去: 1、问题抛出来自星友的一个真实业务场景问题：我现在的业务需求是这样的。有一个作者字段，比如是这样的Li,LeiLei;Han,MeiMei;还有一些是LeiLei Li...。现在要精确匹配。我的想法是：用自定义分词通过分号...

MongoDB 索引之全文索引: mongodb full text search(fts...全文索引，能够从大量的文本中搜索出所需的内容，内置多国语言和分词方法。不支持宇宙第一语言—中文。全文索引会导致mongodb写入性能下降，因为所有字符串都要拆分，存储到不同地方。

ElasticSearch集群搭建，集成中文分词，建立全文检索索引（笔记）: 1.三个虚拟机节点，安装centos6x 2.根据客户端的jdk情况，准备elasticsearch版本 3.对应版本jdk 4.elasticSearch对应版本的中文分词插件 5.对应版本的head插件 6.不考虑kibana，所以直接考虑chrome的sense插件 1....

Java中文分词组件 - word分词: word分词是一个Java实现的分布式的中文分词组件，提供了多种基于词典的分词算法，并利用ngram模型来消除歧义。能准确识别英文、数字，以及日期、时间等数量词，能识别人名、地名、组织机构名等未登录词。能通过...

全文索引----中文分词器mmseg4j: 这时候如何处理这个字段，分词器很好的解决了这个问题。 solr服务器默认为我们提供了分词组件，但是Apache Solr提供的分词器对中文不太友好，举例如下：它把整个句子的每个字都给分开了，这样如果...

MySQL 之全文索引: 最近在复习数据库索引部分，看到了 fulltext，也即全文索引，虽然全文索引在平时的业务中用到的不多，但是感觉它有点儿意思，所以花了点时间研究一下，特此记录。引入概念通过数值比较、范围过滤等就可以...

mysql 中文全文索引模糊查询和like模糊查询的速度对比: mysql 5.7以后支持中文分词全文索引 全文索引查询语句 SELECT * FROM app_list WHERE MATCH (APPNAME,APPJIESHAO,APPJIANJIE,FULI,FANLI,WANFA,TICAI,FENLEI) AGAINST ('历史' IN NATURAL LANGUAGE MODE) ORDER ...

mysql全文索引实现搜索功能（关键词查询）: 最近在做一个关键词查询功能。所以开始了解mysql的全文索引技术。接下来我将一步一步告诉大家。我是如何一步一步实现关键词检索的。1.了解到mysql全文检索是以词为基础的。MySQL默认的分词是所有非字母和数字的特殊...

ElasticSearch中文分词，看这一篇就够了: 本文我们围绕Elasticsearch的分词器，从内置分词器的局限性出发，引出了中文分词器，然后详细介绍了ik分词器的编译，安装配置和使用。

mysql全文索引: 1.创建全文索引(FullText index) 旧版的MySQL的全文索引... 不过新版的MySQL5.6.24上InnoDB引擎也加入了全文索引，所以具体信息要随时关注官网， 1.1. 创建表的同时创建全文索引 CREATE TABLE article ( ...

Python第三方库jieba（中文分词）入门与进阶（官方文档）: jieba “结巴”中文分词：做最好的 ...全模式，把句子中所有的可以成词的词语都扫描出来, 速度非常快，但是不能解决歧义；搜索引擎模式，在精确模式的基础上，对长词再次切分，提高召回率，适合用于搜索引擎分词...

MySql5.7 InnoDB全文索引（针对中文搜索）: MySql5.7 建立全文索引1、ngram and MeCab full-text parser plugins全文检索在MySQL里面很早就支持了，只不过一直以来只支持英文。缘由是他从来都使用空格来作为分词的分隔符，而对于中文来讲，显然用空格就不合适...

mysql中文进行全文索引支持问题: 先来看看对一个字段做全文索引，作为一个数据库系统需要做哪些工作？假设一个文章表里面包含几个字段：文章id、文章作者、文章标题、文章内容比如，我们对文章内容这个字段artilce_content建立全文索引，...

lucene全文搜索之二：创建索引器（创建IKAnalyzer分词器和索引目录管理）基于lucene5.5.3: lucene全文搜索之一中讲解了lucene开发搜索服务的基本结构，本章将会讲解如何创建索引器、管理索引目录和中文分词器的使用。包括标准分词器，IKAnalyzer分词器以及两种索引目录的创建 luncene5.5.3集合jar包下载...

NLP+词法系列（一）︱中文分词技术小结、几大分词引擎的介绍与比较: 笔者想说：觉得英文与中文分词有很大的区别，毕竟中文的表达方式跟英语有很大区别，而且语言组合形式丰富，如果把国外的内容强行搬过来用，不一样是最好的。所以这边看到有几家大牛都在中文分词以及NLP上越走越远。...

采用全文索引解决模糊查询，给出具体步骤）采用全文索引解决模糊查询速度慢的问题[主文]: 采用全文索引解决模糊查询速度慢的问题上一篇 / 下一篇 2009-09-22 20:58:34 查看( 281 ) / 评论( 2 ) / 评分( 8 / 0 ) 转自http://sandish.itpub.net/post/4899/464369 众所周知，使用 like 进行模糊查询...

Oracle模糊查询之（5.1认识全文索引之什么是分词[lexer]）oracle Text 全文检索功能对中文分词的支持情况: http://hi.baidu.com/lewutian 下面例子在XE中测试通过。准备工作： CREATE TABLE issues ( ID NUMBER, summary VARCHAR(120), description CLOB, author VARCHAR(80), ot_v

Elastic Search之分词: 分词器（Analyzer）：elasticsearch中执行的分词的主体，官方把分词器分成三个层次： Character Filters:针对文档的原始文本进行处理，例如将印度语的阿拉伯数字"0 12345678 9"转换成拉丁语的阿拉伯数字&...

全文索引和普通索引的比较: 普通 SQL 索引全文索引存储时受定义它们所在的数据库的控制。存储在文件系统中，但通过数据库管理。每个表允许有若干个普通索引。每个表只允许有一个全文索引。当对作为其基础的数据进行插入、更新或删除时，它们...

Elasticsearch 5.2.1 创建索引-自定义分词器: 解决问题：ES 5.2.1默认使用的 standard 分词器，该分词器是单个汉字进行分词的，而需求使用二元分词，故使用ngram 实现二元分词通过mapping 将分词器与要分词的字段进行映射示例代码： // ...

ES创建索引映射指定分词策略: 在es中使用我们自定义的IK分词插件的时候，创建索引时指定分词，如 { "settings": { "index.analysis.analyzer.default.type": "ik_max_word" //对应 IK 的 ik_max_word 和 i.....

python中文分词工具：结巴分词jieba: 结巴分词jieba 特点支持三种分词模式：精确模式，试图将句子... 全模式，把句子中所有的可以成词的词语都扫描出来, 速度非常快，但是不能解决歧义；搜索引擎模式，在精确模式的基础上，对长词再次切分...

不同规则的中文分词对Lucene索引的影响: 不同规则的中文分词对Lucene索引的影响田春峰在中文全文索引中为了建立反向索引需要对文档中的句子进行切分，相关理论请参见车东的介绍。

python 结巴分词学习: 结巴分词（自然语言处理之中文分词器） jieba分词算法使用了基于前缀词典实现高效的词图扫描，生成句子中汉字所有可能生成词情况所构成的有向无环图(DAG), 再采用了动态规划查找最大概率路径，找出基于词频的最大...

相关热词 c# ef 事务删除 c# this 属性 c#注册代码没有数据库 c#限定时间范围 c#控件跟随窗口大小变化 c# 模板类 c#离线手册 c# 数组、 c#五种限制修饰符 c# urlencode