ES核心概念、IK分词器

发布于:2022-12-21 ⋅ 阅读:(254) ⋅ 点赞:(0)

目录

ES核心概念

 倒排索引

IK分词器

什么是ik分词器?

安装ik分词器

使用Kibana测试

ik分词器增加自定义词汇


 

ES核心概念

 

 

 倒排索引

 

   当用户在主页上搜索关键词“华为手机”时,假设只存在正向索引(forward index),那么就需要扫描索引库中的所有文档,找出所有包含关键词“华为手机”的文档,再根据打分模型进行打分,排出名次后呈现给用户。因为互联网上收录在搜索引擎中的文档的数目是个天文数字,这样的索引结构根本无法满足实时返回排名结果的要求。

       正向索引   相当于通过key找value

所以,搜索引擎会将正向索引重新构建为倒排索引,即把文件ID对应到关键词的映射转换为关键词到文件ID的映射,每个关键词都对应着一系列的文件,这些文件中都出现这个关键词。

        倒排索引  相当于通过value去找key   即从词的关键字,去找文档。

IK分词器

什么是ik分词器?

 

安装ik分词器

 github下载网址:Releases · medcl/elasticsearch-analysis-ik · GitHub

版本也要对应

下载并解压到插件目录下:  

 

查看加载进来的插件:

使用Kibana测试

 ik_smart:

按顺序打断点分词,不会重复出现

ik_max_word : 最细粒度划分,穷尽词库的可能

 

自己需要的词,需要自己加到分词器的字典中

ik分词器增加自定义词汇

 

 新建一个自定义字典dic

 

 

 重启ES

 

未配置字典时:

配置字典后 :

 

本文含有隐藏内容,请 开通VIP 后查看

网站公告

今日签到

点亮在社区的每一天
去签到