带阿拉伯数字的节日 如”51劳动节“ 只能分出”劳动节“，只要数字在前面就识别不出来，同时也很奇怪如果这些数字大于百位数 如”2014劳动节“ 就能分出2014和劳动节，最终想要”61儿童节“=61+儿童节 的效果，大神求助。。...
...先进行中英文粗分，那时就强行把数字、字母与多字节的汉字拆分开。 只有夹在汉字中间的1～2个数字或字终才被允许和汉字组合，比如“T恤” ”Q币“ 这种。 假设你的词典里有”北海36“，被分的句子是 “北海36度”，那...
1.修正夹杂在汉字中间的1-2个英文字符的词性为 en 而不是原来的 un 导致清除符号时消失. 2.调整将数字后面的独立 % 纳入整词作为百分比，如 33.3% 作为整词而不再是 33.3 和 % 3.修改连字符(-)和下划线(_)的规则，当出现在字母单词...
...一套基于词频词典的机械中文分词引擎，它能将一整段的汉字基本正确的 切分成词，因为词是汉语的基本语素单位，而书写的时候不像英语会在词之间 用空格分开，所以如何准确快速的分词一直是中文分词的攻关难点。 本分...
... (感谢lauxinz) [b]scws-1.1.6 发布于 2011-04-20[/b] 修正夹杂在汉字中间的1-2个英文字符的词性为 en 而不是原来的 un 导致清除符号时消失. 调整将数字后面的独立 % 纳入整词作为百分比，如 33.3% 作为整词而不再是 33.3 和 % 修改连字符...