自定义分词器 `Xunsearch` 默认内置了功能强大的 [SCWS][1] 分词系统，也附加提供了一些简单常见的分词规则， 但考虑到用户的个性需求，特意提供了自定义分词器的功能。 > note: 自定义分词器存在一个缺陷，它不支持存...
XSTokenizer 分词接口 [XSTokenizer] 是搜索字段的分词接口定义，整个接口只要求实现一个方法 [XSTokenizer::getTokens]， 自定义分词器用于 INI 配置文件中的 `tokenizer` 选项。 关于自定义分词器的详细用法剖析请阅读后面...
...在安装完 `Xunsearch` 后可以通过服务端内置的 scws[1] 实现分词， 而不需要另外再安装 scws 的 php 扩展。从 `1.3.1` 版本起，`Xunsearch` 的 PHP-SDK 中加入 [XSTokenizerScws] 类，可通过搜索服务端执行分词功能。 用法简单说明 ---------- 这...
...，请自行编写 代码和定义时不要也以 `XS` 开头。 自定义分词 --------- Xunsearch 在项目配置时支持针对某些字段自定义分词。每个自定义分词功能单独使用一个 文件名，命名为 `XSTokenizerXyz.class.php`，其中 `Xyz` 是您自己的分词名称...
...， 请将关联记录转换为搜索项目的新字段并设置对应的分词规则。字段设计很重要， 请仔细根据需求创建，字段名建议和您的实际数据库字段一致。 1. ### 定义字段 每个字段用一个区段配置来表示，中括号内的名字即为字...
...。 访问网址： > note: 在线编辑器暂时不支持指定自定义分词器和分词器参数，这个部分需要用户自行手动修改。 $Id$
...采用 C/C++ 编写，索引设计基于著名而悠久的 [Xapian][1]，分词采用 自主研发同样也是开源的 [SCWS分词][2]，两者完美结合，理论上单个搜索库支持 40 亿条 记录。可编译运行于 Linux/FreeBSD 等各种 UNIX 类型的系统。 *Xunsearch PHP-SDK* 是...
...化代码兼容性 - 增加用户案例文档：USERCASE - 改进自定义分词器 XSTokenizerScws 接受参数作为复合等级 - 升级 libevent 到 2.x 版 - 修正中文 stopwords 不生效的问题 - 取消恼人的 NODB(S#506) 错误提示 - 新增获取文档匹配词表的接口 [XSSearch:...
...为了按版块检索，我们必须对它进行索引，而它也不需要分词，所以分词器用内置的 `full`。 - `tid` 内容也是数字的主题ID，我们暂不考虑按主题搜索，所以不需要索引，也没有排序等要求，所以 只要当作普通字段存储下来即可...
...定义 SCWS 词库 如之前所说，我们所有的索引分词器默认为 scws，这也是我们开发的开源分词系统， 内置的词库基本上能满足绝大多数应用。但总有例外，这也就是即将说的如何自定义词库。 全局自定义词库 --------...