摘要:
分词器的核心类: Analyzer:分词器 TokenStream: 分词器做优点理之后得到的一个流。这个流中存储了分词的各种信息,能够通过TokenStream有效的获取到分词单元。 下面是把文件流转换成分词流(TokenStream)的过程 首先,通过Tokenizer来进行分词,不同分词器有着 阅读全文
posted @ 2017-04-30 16:28
liguangsunls
阅读(700)
评论(0)
推荐(0)
2017年4月30日