欢迎投稿

今日深度:

elasticsearch 分词器,elasticsearch分词

elasticsearch 分词器,elasticsearch分词


一、分词器

分词器 就是把一段句子拆分成一个一个的单个的单词,同时对每个单词进行normalization(时态转换,单复数转换)。主要作用就是:切分词语,normalization(提升recall召回率)。

normalization: 建立倒排索引的时候,会执行一个操作,对拆分出的各个单词进行相应处理,以提升后面搜索的时候能够搜索到的相关联的文档的概率。像时态转换、单复数转换、大小写转换等。

recall(召回率): 搜索的时候,增加能够搜索到的结果的数量

二、分词器的功能

在分词器将文本进行各种处理后,最后处理好的结果才会拿去建立倒排索引。

三、es内置分词器

四、测试分词器

GET /_analyze
{
  "analyzer": "standard",
  "text": "Text to analyze"
}

www.htsjk.Com true http://www.htsjk.com/Elasticsearch/29785.html NewsArticle elasticsearch 分词器,elasticsearch分词 一、分词器 分词器 就是把一段句子拆分成一个一个的单个的单词,同时对每个单词进行normalization(时态转换,单复数转换)。主要作用就是:切分词...
相关文章
    暂无相关文章
评论暂时关闭