1、IK分词(Git)

1.1、IK分词插件安装

/usr/share/elasticsearch/bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.2.3/elasticsearch-analysis-ik-6.2.3.zip
sudo systemctl stop elasticsearch.service
sudo systemctl start elasticsearch.service

PS：如果是集群模式，则每个节点都需要安装；

1.2、本地词库配置

vi /etc/elasticsearch/analysis-ik/IKAnalyzer.cfg.xml

修改"ext_dict"，可在/etc/elasticsearch/analysis-ik/目录下新建custom，拷贝fresh.dic。

<entry key="ext_dict">custom/fresh.dic</entry>

重启elasticsearch即可

PS：如果是集群模式，则每个节点都需要配置；

1.3、远程词库配置（热更新）

vi /etc/elasticsearch/analysis-ik/IKAnalyzer.cfg.xml

修改"remote_ext_dict"

<entry key="remote_ext_dict">http://ip:port/products/freshdictrequest</entry>

通过配置远程扩展词典，可以完成热词更新。

实现方式：从词库中查询近一分钟新增热词，若存在，则在OpenResty中修改header的ETag(Etag=os.time())

PS：如果是集群模式，则每个节点都需要配置；

该实现方式有一坑：

IKAnalyzer.cfg.xml中配置后，重启ES，报异常

java.security.AccessControlException: access denied (java.net.SocketPermission ip:port connect,resolve)

此时，需要在

/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.161-0.b14.el7_4.x86_64/jre/lib/security/java.policy

中新增信任站点：

permission java.net.SocketPermission "ip:port","accept";permission java.net.SocketPermission "ip:port","listen";permission java.net.SocketPermission "ip:port","resolve";permission java.net.SocketPermission "ip:port","connect";

2、拼音分词(Git)

/usr/share/elasticsearch/bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-pinyin/releases/download/v6.2.3/elasticsearch-analysis-pinyin-6.2.3.zip
sudo systemctl stop elasticsearch.service
sudo systemctl start elasticsearch.service

PS：如果是集群模式，则每个节点都需要安装；

3、IK-PinYin分词方案(仅供参考，欢迎指正！)

PUT test
{"index": {"analysis": {"analyzer": {"ik_pinyin_analyzer": {"type": "custom","tokenizer": "ik_smart","filter": ["my_pinyin","word_delimiter"]}},"filter": {"my_pinyin" : {"type" : "pinyin","keep_separate_first_letter" : false,"keep_full_pinyin" : true,"keep_original" : false,"limit_first_letter_length" : 10,"lowercase" : true,"remove_duplicated_term" : true}}}}
}

ElasticSearch之中文、拼音分词相关推荐

debian 10 buster 安装配置 elastic search 和中文, 拼音分词
debian 10 buster 安装配置 es 和中文, 拼音分词安装测试配置分词 IK 分词器拼音分词一个完整的动态映射模板(包含geo, pinyin, IK) 安装 1, 安装j ...
Springboot集成elasticsearch 使用IK+拼音分词
Springboot集成elasticsearch 使用IK+拼音分词 docker安装ES 下载 docker pull docker.elastic.co/elasticsearch/elasti ...
Elasticsearch 5.5.1 中文/拼音分词亲测有效
所有不说明elastic 版本的博客都是耍流氓 . --某码农原文链接版本如题.拼音和中文分词一起的整个测试流程如下: 预备删除 index DELETE /index_name/ { } 创建 ...
记一次springboot2.3.*项目整合elasticsearch7.6.2实现中文拼音分词搜索
一.elasticsearch官网下载:Elasticsearch 7.6.2 | Elastic 二.拼音.ik.繁简体转换插件安装 ik分词:GitHub - medcl/elasticsearc ...
Elasticsearch如何修改拼音分词插件支持音调搜索
背景 es默认加载的拼音分词插件是不支持音调搜索的,如何修改插件使得它支持音调搜索?又或者多音字你想要默认的读音是另外一个,例如曾默认读音是ceng,我想修改其默认读音为zeng. 下载拼音分词插件代 ...
es拼音分词大帅哥_SpringBoot集成Elasticsearch 进阶，实现中文、拼音分词，繁简体转换...
Elasticsearch 分词分词分为读时分词和写时分词. 读时分词发生在用户查询时,ES 会即时地对用户输入的关键词进行分词,分词结果只存在内存中,当查询结束时,分词结果也会随即消失.而写时分词 ...
【Elasticsearch】Elasticsearch analyzer 中文分词器
1.概述转载: https://blog.csdn.net/tzs_1041218129/article/details/77887767 分词器首先看文章:[Elasticsearch]Elast ...
Elasticsearch 2.3.x 拼音分词 analysis-lc-pinyin
我选择了elasticsearch-analysis-lc-pinyin作为拼音分词插件,它是一款elasticsearch拼音分词插件,可以支持按照全拼.首字母,中文混合搜索. elasticsea ...
ElasticSearch 2.4.X实现中文拼音排序
前言最近接到一个需求,要求实现搜索框的搜索结果可以按照中文排序,本人灵机一动,那不很简单吗,直接按照es自带的sort功能处理下不就行了吗?两分钟的代码量,半天的喝茶时间,白赚半天的故事点,嘿嘿. ...

ElasticSearch之中文、拼音分词