paoding java_中文分词器-PaodingAnalyzer

在pom.xml中添加依赖：

com.thihy

elasticsearch-analysis-paoding

1.4.2.1

org.elasticsearch

elasticsearch

1.5.2

到网上下载paoding分词器

在src/main/resources/paoding建立文件：paoding-analysis.properties，内容如下paoding.analyzer.mode=most-words

paoding.analyzer.dictionaries.compiler=net.paoding.analysis.analyzer.impl.MostWordsModeDictionariesCompiler

paoding.dic.home=classpath:paoding/dic

paoding.dic.detector.interval=60

paoding.knife.class.letterKnife=net.paoding.analysis.knife.LetterKnife

paoding.knife.class.numberKnife=net.paoding.analysis.knife.NumberKnife

paoding.knife.class.cjkKnife=net.paoding.analysis.knife.CJKKnife

将dic文件夹拷贝到src/main/resources/paoding下

测试@Test

public void test() throws IOException {

Analyzer analyzer = new PaodingAnalyzer("classpath:paoding/paoding-analysis.properties");

String text = "我爱北京天安门";

TokenStream tokenStream = analyzer.tokenStream("", text);

tokenStream.reset();

while (tokenStream.incrementToken()) {

CharTermAttribute charTermAttribute = tokenStream

.addAttribute(CharTermAttribute.class);

System.out.println(charTermAttribute);

}

运行单元测试，控制台输出：我爱

北京

天安

天安门

paoding java_中文分词器-PaodingAnalyzer相关推荐

如何在基于Lucene的中文分词器中添加自定义词典（如Paoding、mmseg4j、IK Analyzer）...
如何在基于Lucene的中文分词器中添加自定义词典(如Paoding.mmseg4j.IK Analyzer) 2013-07-08 21:54:29| 分类: 计算机 |字号订阅 1. 使用Pa ...
11大Java开源中文分词器的使用方法和分词效果对比
2019独角兽企业重金招聘Python工程师标准>>> 本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了1 ...
【Elasticsearch】Elasticsearch analyzer 中文分词器
1.概述转载: https://blog.csdn.net/tzs_1041218129/article/details/77887767 分词器首先看文章:[Elasticsearch]Elast ...
11大Java开源中文分词器的使用方法和分词效果对比，当前几个主要的Lucene中文分词器的比较...
本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码,至于效果哪个好,那 ...
Java开源的11个中文分词器使用方法和分词效果对比
本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码,至于效果哪个好,那 ...
【分词器】11大Java开源中文分词器的使用方法和分词效果对比
本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码,至于效果哪个好,那 ...
11大Java开源中文分词器的使用方法和分词效果对比（转）
原文出处: 杨尚川本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码 ...
[024] 11大Java开源中文分词器的使用方法和分词效果对比
本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码,至于效果哪个好,那 ...
Java开源中文分词器的使用方法和分词效果对比
本文的目标有两个: 1.学会使用11大Java开源中文分词器 2.对比分析11大Java开源中文分词器的分词效果本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码,至于效果哪个好,那 ...

paoding java_中文分词器-PaodingAnalyzer

paoding java_中文分词器-PaodingAnalyzer相关推荐

最新文章

热门文章