搜索 - 迅搜(xunsearch) - 开源免费中文全文搜索引擎

发布时间：2011-12-24 16:12 t By emo

老大，能把您的TF/IDF算法共享出来么？批量添加词库的时候真的很不方便啊，如果写个脚本调用你的[url=http://www.ftphp.com/scws/demo/get_tfidf.php]在线TF/IDF算法工具[/url]，恐怕上万条请求你的服务器招架不住啊。。。老大你的词库更...

更新时间：2013-03-13 14:03 t By jasonniu

看了下代码注释太少了希望能给介绍一下算法方便研究。[hr] 顶上去哈哈

发布时间：2014-06-27 22:06 t By dd201077

分词之后能否加入上下文算法，再去查询

发布时间：2014-07-21 11:07 t By clearchen

想做自定义词库的功能。哪位大侠，是否可以告知， http://www.xunsearch.com/scws/demo/get_tfidf.php 的算法。谢谢

发布时间：2011-12-26 16:12 t By hightman

那个也不太准，新词你统统设为1就可以了

发布时间：2008-04-03 15:04 t By routerpipe

...涉及到对语法的分析上，所以不知道你有没有好的相关度算法推荐下，谢谢！

发布时间：2013-05-22 16:05 t By zouhc

感谢H大回复，好像是你说的这个问题。曾经我以为这个scws是国外高人开发的，最近才发现国内的牛人。作为苦逼的程序一员，你就是我心中的刘德华了。

发布时间：2013-05-28 10:05 t By tiankong

...WORD: 完/un (IDF = 0.00) WORD: 了/un (IDF = 0.00) 请问：scws分词算法在X86处理器（CPU小端模式）上可以正确分词，scws怎么样才能在PPC等处理器上（CPU大端模式下）正确分词呢？

发布时间：2013-05-30 15:05 t By hightman

词库的字节序原因，你可以在 ppc 处理器上重新用 bin/gen-scws-dict 制作一份词库就可以了。

发布时间：2013-05-22 13:05 t By hightman

TF/IDF值不会导致用不到分词，只是靠在一起时需要消岐才用得到。你自定义词典用不了要查查是什么别的原因。通常问题： 1.词典写的字符集不对，比如把GBK当UTF-8了 2.词典更新后的修改时间由于某些原因比/tmp目录下生成的临...