Jieba作为分词器与Elasticsearch集成

小咪咪 2021-09-28 18:16 506阅读 0赞

在github上找到相关项目，[https://github.com/sing1ee/elasticsearch-jieba-plugin][https_github.com_sing1ee_elasticsearch-jieba-plugin]，支持5.X版本的es。

在165主机上部署的是5.2.2版本的es，下载对应的elasticsearch-jieba-plugin 版本

支持两种analyzer：

jieba\_index: 用于索引分词，分词粒度较细  
 jieba\_search: 用于查询分词，分词粒度较粗

# 1、编译部署 #

##  安装gradle ##

项目是使用gradle编译的，在自己电脑上先安装gradle。

下载gradle安装包 [https://downloads.gradle.org/distributions/gradle-4.3-all.zip][https_downloads.gradle.org_distributions_gradle-4.3-all.zip]

解压到自定义目录，然后配置环境变量即可，测试安装是否成功，执行 gradle -v

##   编译项目 ##

gradle pz

## 部署插件 ##

编译成功后，拷贝文件 build/distributions/elasticsearch-jieba-plugin-5.1.2.zip到es的plugins目录下

解压后删除压缩包

unzip elasticsearch-jieba-plugin-5.1.2.zip
    rm elasticsearch-jieba-plugin-5.1.2.zip

最后重启es生效

# 2、测试jieba分词器 #

使用postman通过rest接口测试分词效果

### jieba\_search ###

POST  192.168.1.165:9200/jieba\_index/\_analyze

{
    "analyzer":"jieba_search",
    "text":"近日，国外几名网友整理了一份自然语言处理的免费/公开数据集（包含文本数据）清单，为防止大家错过这个消息，论智暂且把清单内容搬运如下。有需要的读者可直接收藏本文，或去github点个星星以示感谢"
    }

### jieba\_index ###

POST  192.168.1.165:9200/jieba\_index/\_analyze

{
    "analyzer":"jieba_index",
    "text":"近日，国外几名网友整理了一份自然语言处理的免费/公开数据集（包含文本数据）清单，为防止大家错过这个消息，论智暂且把清单内容搬运如下。有需要的读者可直接收藏本文，或去github点个星星以示感谢"
    }

# 3、测试自定义词典 #

自定义词典以文本形式，命名以**.dict**结尾，放到plugins/jieba/dic目录下，重启es生效

### jieba\_search ###

POST  192.168.1.165:9200/jieba\_index/\_analyze

### jieba\_index ###

POST  192.168.1.165:9200/jieba\_index/\_analyze

[https_github.com_sing1ee_elasticsearch-jieba-plugin]: https://github.com/sing1ee/elasticsearch-jieba-plugin
[https_downloads.gradle.org_distributions_gradle-4.3-all.zip]: https://downloads.gradle.org/distributions/gradle-4.3-all.zip

Jieba作为分词器与Elasticsearch集成

发表评论取消回复

还没有评论，来说两句吧...

相关阅读

相关 Python 中文分词神器——jieba

相关 IK分词器和Elasticsearch集成使用

相关 jieba分词器 java_jieba分词java版项目

相关 jieba分词

相关 jieba分词

相关 elasticsearch 分词器

相关 jieba分词

相关 jieba结巴分词器

相关 Elasticsearch 分词器

相关 Jieba作为分词器与Elasticsearch集成