最近在做个项目,用到了分词,找了一下,发现这个,很好. 遇到一个问题, 命令导出xdb到txt,只导出了这个 # WORD TF IDF ATTR 请问这是咋回事
...kenizer !== XSTokenizer::DFL);} 判断当前字段是否采用自定义分词器
我安装SCWS-1.1.1已经php扩展scws.so 查看版本却是(Module version:0.0.3, Library version:1.0.4)，并非1.1.1 win环境安装php扩展版本是(Module version:0.0.4, Library version:1.1.1) 分词结果完全不同，请问怎么回事
还有就是内存的问题，因为我希望在服务器端有个自动生成词库的功能，命令行方式不是很方便。 主要是用机器先自动分词，人工发现不合理，再把新词增加进去。
最近在搞分词相关的毕业设计 是C++开发的 想用大神的SCWS 把LIBSCWS编译成DLL来供我自己的程序调用 但是在WINDOWS下编译老是过不了 给的VC++6的项目也编译不成功，希望大神能指教下怎么在windows下编译
最近在搞分词相关的毕业设计 是C++开发的 想用大神的SCWS 把LIBSCWS编译成DLL来供我自己的程序调用 但是在WINDOWS下编译老是过不了 给的VC++6的项目也编译不成功，希望大神能指教下怎么在windows下编译
按“说明”里的方法 ，我在CMD里做了如下输入 ，能运行，但是导不出内容来： 怎么回事呢？能正常运行分词的功能。 F:\phpStudy\PHP5> php F:\www\test\pscws23\XDB-IO\dump_xdb_file.php F:\www\test\pscws23\XDB-IO\dictxdb C:\xx.txt 请教HM,谢谢！
...，提示93行处的TF、IDF、Attr不存在，这明显示是：“[b]对分词再分词[/b]”带来的结果，在65行处看到only support GBK dictionary 到80行，这是不参对utf-8字符处理的，不能对中文(中英混合)字符进行mb_substr($word, 0, $len)切分,[u]mb_substr($wor...
...也被编译进去了这是怎么回事，即使不需要set_dict也可以分词 另外这种情况下，set_dict感觉和add_dict一样，我的词典和编译进去的那个词典会一起使用 一些文章带有大量的链接http:// 结果 http com www 这些词 会被放到结果中，...
我用的是 "陈凯歌并不是《无极》的唯一著作权人，一部电影的整体版权归电影制片厂所有" 这段话,不知道为什么就只能分割出来陈凯歌,如果是分词没起作用的话就不会分割出陈凯歌的,这到底是为什么呢?麻烦高人帮帮我吧