jcseg歧义句子分词测试

原创
2013/06/05 13:56
阅读数 1.5K

今天在晚上看到一些网友测试分词器常用的起义语句, 我拿jcseg去试了下: 

1. 结婚的和尚未结婚的
jcseg分词: 
结婚 的 和 尚未 结婚 的
Done, total:10, split:6, cost: 0.00026sec

2. 他说的确实在理
jcseg分词:
他 说 的 确实 在理
Done, total:7, split:5, cost: 0.00052sec


3. 把手抬起来
jcseg分词:
把手 抬起 来
Done, total:5, split:3, cost: 0.00000sec

4. 邓颖超生前使用过的物品 
jcseg分词:
邓颖超 生前 使用 过 的 物品
Done, total:11, split:6, cost: 0.00000sec

5. 阿拉斯加遭强暴风雪袭击致xx人死亡
jcseg分词:
阿拉斯加 遭 强暴 风雪 袭击 致 xx 人 死亡
Done, total:17, split:9, cost: 0.00052sec


6. 今后三年中将翻两番
jcseg分词:
今后 三年 中将 翻两番
Done, total:9, split:4, cost: 0.00000sec

7. 乒乓球拍卖完了
jcseg分词:
乒乓球 拍卖 完了
Done, total:7, split:3, cost: 0.00000sec

8. 粮食不卖给八路军
jcseg分词:
粮食 不 卖给 八路军
Done, total:8, split:4, cost: 0.00105sec

9. 费孝通向人大常委会提交书面报告
jcseg分词:
费孝通 向 人大常委会 提交 书面报告
Done, total:15, split:5, cost: 0.00105sec

10. 梁启超生前住在这里
jcseg分词:
梁启超 生前 住在 这里
Done, total:9, split:4, cost: 0.00000sec

11. 吴江西陵印刷厂
jcseg分词:
吴江 西陵 印刷厂
Done, total:7, split:3, cost: 0.00000sec

12. 叔叔亲了我妈妈也亲了我
jcseg分词:
叔叔 亲了 我 妈妈 也 亲了 我

Done, total:11, split:7, cost: 0.00000sec

机械匹配方法, 上面有些句子似乎很难得到正确的切分.

这些都是其他分词器切分结果不是很好的句子, jcseg的切分效果确实有些优势.

展开阅读全文
打赏
1
0 收藏
分享
加载中
狮子的魂博主

引用来自“暴暴牛”的评论

牛逼,顶一个,不过速度好像很慢啊

慢??? 我的老土的台式机器上面测试的速度是30W/s, 而且是基于文件流切分的,你看到的是第一次吧。。。
2013/12/27 12:11
回复
举报
牛逼,顶一个,不过速度好像很慢啊
2013/12/27 11:23
回复
举报
更多评论
打赏
2 评论
0 收藏
1
分享
在线直播报名
返回顶部
顶部