利用IK Analyzer分词

import java.io.IOException;
import java.io.StringReader;
import org.apache.lucene.analysis.Analyzer;
import org.apache.lucene.analysis.TokenStream;
import org.apache.lucene.analysis.tokenattributes.CharTermAttribute;
import org.wltea.analyzer.lucene.IKAnalyzer;

public class IK_Analyzer {
    
    public static String Seg(String sentence) throws IOException {
        String text="";
        //创建分词对象
        Analyzer anal=new IKAnalyzer(true);
        StringReader reader=new StringReader(sentence);
        //分词
        TokenStream ts=anal.tokenStream("", reader);
        CharTermAttribute term=ts.getAttribute(CharTermAttribute.class);
        //遍历分词数据
        while(ts.incrementToken()){
            text+=term.toString()+"/";
        }
        reader.close();
        anal.close();
        return text.trim()+"\n";
    }

    public static void main(String[] args) {
        try {
            System.out.println(IK_Analyzer.Seg("你妈妈喊你回家吃饭哦，回家喽！回家喽！"));
            System.out.println(IK_Analyzer.Seg("你非常好，像白马一样。"));
            System.out.println(IK_Analyzer.Seg("白龙马，名著小说《西游记》中的角色。本是西海龙王三太子，因纵火烧毁玉帝赏赐的明珠而被西海龙王上天庭告忤逆，要被斩首。后因南海观世音菩萨出面才免于死罪，被贬到蛇盘山鹰愁涧等待唐僧取经。之后又误吃唐僧所骑的白马，被菩萨点化，变身为白龙马，皈依佛门，载乘唐僧上西天取经，最终修成正果，被升为八部天龙广力菩萨（又称八部天龙马）。后在化龙池得复原身，盘绕在大雷音寺的擎天华表柱上。"));
        } catch (IOException e) {
                e.printStackTrace();
        }
    }
}