那个属性对分词效果有一定影响的，TF主要用于词的切分，IDF用于统计，词性就用在取TOP时过滤或标注上。 最好是基于现有的词典去补充，你重建一个的话数据又都没有效果可能会比较差。SCWS主页上有一个TF/IDF计算器，你可...
...类。 我想XUNSEARCH是否可以实现， 文章发过来的，自动分词的基础上，得出最适合本文的标签。 这里可以按照权重来给标签来个排序，如：热门度，关联度，重复度等等。 如果xunsearch能出这么一个webservice就更好了。
我用的是 "陈凯歌并不是《无极》的唯一著作权人，一部电影的整体版权归电影制片厂所有" 这段话,不知道为什么就只能分割出来陈凯歌,如果是分词没起作用的话就不会分割出陈凯歌的,这到底是为什么呢?麻烦高人帮帮我吧
其实主要意思是看你的应用是否持续调用分词功能。持续调用就用mem的方式
我想在windows下来使用分词 下载了php_scws.dll/Win32 安装说明里我也都照做了。但是有个地方不是很明白 ; 注意请检查 php.ini 中的 extension_dir 的设定值是否正确, 否则请将 extension_dir 设为空， ; 再把 php_scws.dll 指定为绝对路径。 ...
不明白你说的。同义词是基于分词后的结果制作的。 如果你的索引先前制作，后面再添加自定义词，那么当然无效了。你要重建索引
你可以正常分词试试，然后打印一下词的 attr 属性到底是不是* 号 我估计是不是你自定义词典先于默认词典加载，导致attr属性被覆盖了？
...也被编译进去了这是怎么回事，即使不需要set_dict也可以分词 另外这种情况下，set_dict感觉和add_dict一样，我的词典和编译进去的那个词典会一起使用 一些文章带有大量的链接http:// 结果 http com www 这些词 会被放到结果中，...
...果将ft_min_word_len改为2， 然后在程序里将内容用scws进行分词，然后存入数据库单独的字段里，用空格分开，检索的时候， 用mysql的全文检索，可以检索到结果， 然后在再程序里面对结果进行分析。 就比如说这样的sql语句是完...