问题:我在PPC等处理器上测试scws,发现都不能正确分词。 例如将“乒乓球拍卖完了”分词后结果为: WORD: 乒/un (IDF = 0.00) WORD: 乓/un (IDF = 0.00) WORD: 球/un (IDF = 0.00) WORD: 拍/un (IDF = 0.00) WORD: 卖/un (IDF = 0.00) WORD: 完/un (IDF = 0.00) W...
不能正确分词,测试代码在 Windows php5 下运行正常 纠结问题所在 原话:“喜讯:谷歌中国宣布将关闭两大服务 终止与天涯合作” 分词结果:“谷歌中 宣布 关闭两” Windows 下分词就是正确的 分词结果:“喜讯 谷歌 中国 宣布 ...
...新手,对于php只懂一些皮毛,现在想使用 SCWS(简易中文分词) 基于HTTP/POST的分词的API 但是不知道怎么调用,我用这个方式调用API,结果显示在网页上,我要如何调用才能将结果获取下来呢?比如我能将结果直接存在一个变量中...
词库的字节序原因,你可以在 ppc 处理器上重新用 bin/gen-scws-dict 制作一份词库就可以了。
https://code.google.com/p/http-scws/ 用这个试试
在使用scws分词的时候,如果输入40多个“卡”字,最后分出来的那个词少了一个字节,就是说在utf8下原本3字节的一个“卡”字,变成了两个字节,形成了一个乱码。在线测试也会出现这种情况,大家怎么解决啊???
我想对打断的英文做分词,utf-8,scws可以用么?应该下载哪个版本呢?PSCWS4 说是速度慢,不推荐使用,而PSCWS23 仅支持GBK字符集
请问scws分词如何分出“四个字的词”呢? 目前只要超过三个就被拆分成两个,比如我要拆分 “2013春夏汽车新款” 中“2013春夏”怎么弄呢? 词典中我添加了“2013”、“春夏”、“2013春夏”,就是拆分不出“2013春夏”。求...
请问scws分词如何分出“四个字的词”呢? 目前只要超过三个就被拆分成两个,比如我要拆分 “2013春夏汽车新款” 中“2013春夏”怎么弄呢? 词典中我添加了“2013”、“春夏”、“2013春夏”,就是拆分不出“2013春夏”。求...