tokenizer 分词器 默认为 default 采用内置的功能强大的 scws 分词，适合绝大多数字符串字段。也可以指定自定义分词器，格式为 name 或 name(arg) 两种形式，其中 name 是分词器名称，arg 则是传递给分词器构造函数的参数。自定义分词...
在ubuntu12.04下安装了分词， http://www.xunsearch.com/scws/demo/v48.php（演示分词） 与本地的分词效果不一样 本地分词结果： 陈凯歌 并 不 是 《 无 极 》 的 唯 一 著 作 权人 ， 一 部 电 影 的 整 体 版 权归电 影 制 片 厂 所 有 。 一 ...
我根据论坛和ftphp网站上要求，在自己的服务器上配置SCWS，但始终无法分词。 我需要的是utf8编码的。 测试文件在gbk下好使，应该如何改成utf8格式的？ 请教管理员，我该如何操作。 :huh:
...ftphp网站上要求，在自己的服务器上配置SCWS，但始终无法分词。 我需要的是utf8编码的。 测试文件在gbk下好使，应该如何改成utf8格式的？ 请教管理员，我该如何操作。 :huh: [/quote] 你要注意的是 一些文件里面的 编码设置
比如我要搜索 E14188m 这个词的时候，能搜索到。 但是当我要搜索 E1418的时候却无法搜索到。希望能够配置数字当做字符串
当在中文中加入英文后，英文加头部时，只能得到英文分词，而后面的中文却没用了；英文中间时，仅能得到英文前的汉字的分词；英文放尾部时，英文分词也得不到，这是哪里没配置的原因么？ 我在网站上在线分词那输入中...
不是很明白，你说的自动分词？？是什么意思 你在配置文件中不要指定 tokenizer 选项就会自动使用 SCWS 分词了。
以前的二元分词只支持英文，最后找到问题 public function getTokens($value, XSDocument $doc = null) { $terms = array(); for ($i = 0; $i < mb_strlen($value,"utf-8"); $i += $this->arg) { $terms[] = mb_substr($value, $i, $this->arg,"utf-8"); } return $terms; }...
[quote='hpxl' pid='7811' dateline='1400033006'] sdk/php/app/demo.ini配置 [id] type = id [/quote] 是scws-1.2.2 的如何让它支持自已定义的英文词库？ 像http://bbs.xunsearch.com/showthread.php?tid=3088 这样修改代码吗？