分词问题整理和发现

10.1

 

分词问题:

('钱收错了,怎么办?\n' '钱收错了 怎么办'

('钱什么时候到账?\n' '钱 什么时候 到账'

因为使用了hmm模型,会自动识别新词


('配方卡支持吗?\n' '配方 卡 支持' '寄养卡怎么弄?(购物卡)\n' '寄养 卡 怎么弄 购物 卡'

添加自定义词库


('那手机版可不可以添加商品条码\n' '手机 版 可不可以 添加 商品 条码'
'网店怎么弄?\n' '网店 怎么弄'

 

posted @ 2018-11-01 16:30  yjy888  阅读(118)  评论(0编辑  收藏  举报