郁闷最近改进了一下藏拙分词,词库有400万词汇!5000字的文章完全切分居然需要 接近1秒钟的时间!

Question

郁闷最近改进了一下藏拙分词,词库有400万词汇!5000字的文章完全切分居然需要 接近1秒钟的时间! 不知道大家有什么更快的算法啊 http://tieba.cangzhuo.com/qqsy.html 这是在线切分测试地址(支持大规模并发),欢迎大家指导,谢谢! PC一台, 2G内存,还跑了这6个站 http://so.cangzhuo.com 
http://tieba.cangzhuo.com 
http://hi.cangzhuo.com 
http://daohang.cangzhuo.com 
http://apache.cangzhuo.com 
http://sourcecode.cangzhuo.com 带宽 512K 
Hello world!杨树叶子女生活在大小沟林里,没有看到过城里面积木一样儿的漂亮光景的房子.搜索引擎 全文长度 90 共分出 38 个词.开始时间: 2008-12-28 05:40:33 结束时间:2008-12-28 05:40:33 共用时间0.016000秒 
Hello / world / 杨树 / 树叶 / 叶子 / 子女 / 女生 / 生活 / 活在 / 在大小 / 大小 / 小沟 / 沟林 / 林里 / 没有 / 有看 / 看到 / 到过 / 过城 / 城里 / 里面 / 面积 / 积木 / 木一 / 一样 / 样儿 / 儿的 / 的漂 / 漂亮 / 亮光 / 光景 / 景的 / 的房 / 房子 / 搜索 / 搜索引擎 / 索引 / 引擎 /欢迎大家指导,谢谢!

Answer 1

郁闷最近改进了一下藏拙分词,词库有400万词汇!5000字的文章完全切分居然需要 接近1秒钟的时间! 不知道大家有什么更快的算法啊 http://tieba.cangzhuo.com/qqsy.html 这是在线切分测试地址(支持大规模并发),欢迎大家指导,谢谢! PC一台, 2G内存,还跑了这6个站 http://so.cangzhuo.com 
http://tieba.cangzhuo.com 
http://hi.cangzhuo.com 
http://daohang.cangzhuo.com 
http://apache.cangzhuo.com 
http://sourcecode.cangzhuo.com 带宽 512K 
Hello world!杨树叶子女生活在大小沟林里,没有看到过城里面积木一样儿的漂亮光景的房子.搜索引擎 全文长度 90 共分出 38 个词.开始时间: 2008-12-28 05:40:33 结束时间:2008-12-28 05:40:33 共用时间0.016000秒 
Hello / world / 杨树 / 树叶 / 叶子 / 子女 / 女生 / 生活 / 活在 / 在大小 / 大小 / 小沟 / 沟林 / 林里 / 没有 / 有看 / 看到 / 到过 / 过城 / 城里 / 里面 / 面积 / 积木 / 木一 / 一样 / 样儿 / 儿的 / 的漂 / 漂亮 / 亮光 / 光景 / 景的 / 的房 / 房子 / 搜索 / 搜索引擎 / 索引 / 引擎 /欢迎大家指导,谢谢!