Elasticsearch源码解读六：ES中的倒排索引

最新推荐文章于 2025-07-13 16:29:59 发布
原创 最新推荐文章于 2025-07-13 16:29:59 发布 · 644 阅读 · 1
标签
#elasticsearch #搜索引擎 #索引
本文深入解析Elasticsearch中的倒排索引，包括分词过程、单词-文档矩阵概念、倒排索引的组成（单词词典和倒排列表）以及倒排索引的搜索过程，强调了选择合适分词器的重要性。

文章目录

前言

再Elasticsearch系列三：创建索引过程详解一文中，介绍了ES创建索引的流程。再流程中是调用Lucene的接口来创建索引的。本篇文章主要介绍ES中的索引——倒排索引

分词

在创建索引之前，会对文档中的字符串进行分词。ES中字符串有两种类型，keyword和text。

  • keyword类型的字符串不会被分词，搜索时全匹配查询
  • text类型的字符串会被分词，搜索时是包含查询

不同的分词器对相同字符串分词的结果大有不同，选择不同的分词器对索引的创建有很大的影响

如拆分“中华人民共和国国歌”

  1. ik_max_word分词器: 最细粒度拆分，分词结果如下：
    • 中华人民共和国
    • 中华人民
    • 中华
    • 华人
    • 人民共和国
    • 人民
    • 人
    • 民
    • 共和国
    • 共和
    • 和
    • 国国
    • 国歌
  2. ik_smart分词器: 最粗粒度的拆分，分词结果如下：
    • 中华人民共和国
    • 国歌
了解本专栏 订阅专栏 解锁全文 超级会员免费看
python倒排索引实现_Elasticsearch中的倒排索引
weixin_39620679的博客
12-15 634
前言再Elasticsearch创建索引流程一文中，介绍了ES创建索引的流程。再流程中是调用Lucene的接口来创建索引的。本篇文章主要介绍ES中的索引——倒排索引分词在创建索引之前，会对文档中的字符串进行分词。ES中字符串有两种类型，keyword和text。keyword类型的字符串不会被分词，搜索时全匹配查询text类型的字符串会被分词，搜索时是包含查询不同的分词器对相同字符串分词的结果大有...
好玩的ES--第二篇之高级查询，索引原理和分词器
m0_53157173的博客
03-04 4071
好玩的ES--第二篇高级查询说明语法常见检索查询所有[match_all]关键词查询(term)范围查询[range]前缀查询[prefix]通配符查询[wildcard]多id查询[ids]模糊查询[fuzzy]布尔查询[bool]多字段查询[multi_match]默认字段分词查询[query_string]高亮查询[highlight]返回指定条数[size]分页查询[form]指定字段排序[sort]返回指定字段[_source]索引原理倒排索引索引模型分词器Analysis 和 AnalyzerA
ElasticSearch的倒排索引和查询
你今天真好看呀
07-24 3521
1. Restful架构风格 1、使用restful风格的url代替传统的url 传统的url：http://localhost:8989/xxx/find?id=1 RestUrl：http://localhost:8989/xxx/find/1 2、使用http的四种方法代替服务器的CRUD操作 @GetMapping、@PostMaaping、@PutMapping、@GetMapping @RequestMapping可以支持所有的请求方式，可以通过method属性指定请求方式 local
Elasticsearch倒排索引详解
什么最重要？算法！！
12-24 2807
ES
ES 索引mapping之keyword；term查询添加keyword查询；更改mapping keyword类型
weixin_42357472的博客
06-24 6541
参考：https://blog.csdn.net/winterking3/article/details/108254346 https://blog.csdn.net/tclzsn7456/article/details/79956625默认mapping结构一般是： 如果不设置mapping，ES默认把字符串设为text类型，并包含一个keyword子类型。 ***这种结构保存字段会存两份索引(个人理解)，首先第一个type text这个会进行分词保存，再后面fields keyword会进行保存完整
倒排索引：ES倒排索引底层原理及FST算法的实现过程
Elastic开源社区
08-08 2万+
这也许是你全网你能找到的最详细的倒排索引的底层解读。博主把倒排索引的讲解划分为以下七个部分，理解难度递增，可根据自身需要选择依次阅读或者针对性阅读。通常来说，应付一般的面试，理解第一部分即可。如果需要面试搜索相关业务的岗位，需要深层次理解倒排索引，可根据自身情况选择阅读。本文花费了作者大量的精力来论证和整理，如果你喜欢作者的文章，请帮忙点个赞和关注吧 O(∩_∩)O ~。谢谢大家的支持。提到ES，大多数爱好者想到的都是搜索引擎，尽管这是个误区，但是也不得不提。大数据搜索最重要的三个要素分别是 “快”、“准”
ElasticSearch基础1——索引和文档。Kibana,RestClient操作索引和文档+黑马旅游ES库导入
种一棵树最好的时间是十年前，其次是现在
09-12 6715
概念、ik分词器、倒排索引、索引和文档的增删改查、RestClient对索引和文档的增删改查
ElasticSearch学习篇6_ES实践与Lucene对比及原理分析技术分享小记
xiaosi的博客
11-19 1388
QBM、MFS的试题检索、试题查重、公式转换映射等业务场景以及XOP题库广泛使用搜索中间件，业务场景有着数据量大、对内容搜索性能要求高等特点，其中XOP题库数据量更是接近1亿，对检索性能以及召回率要求高。目前QBM、MFS使用的搜索中间件是Solr，后续需要升级为ES。看的书是《ElasticSearch源码解读与优化实战》的前半部分（与这篇博客部分内容重合），主要是ES的一些工程模块，分布式集群的一些理论知识。
搜索引擎源码详解与应用
最新发布
weixin_31139479的博客
07-13 845
htmltable {th, td {th {pre {简介：搜索引擎源码构成了一个复杂系统，包括网页抓取、索引构建、查询处理和结果排序等关键环节。本文详细解读了多个关键文件，如用户界面模板、主页、读我文件、PHP脚本、全局函数库、配置文件、点击追踪和PHP配置测试文件。这些文件共同构成了搜索引擎的核心功能，为开发者提供了学习和修改源码的宝贵资料。了解这些文件的作用和实现方式，对深入理解搜索引擎工作原理至关重要。
elasticsearch sort script实现字段值等于某值排名靠前
勤于笔记，成于点滴。
10-11 2514
根据需求我们可以用es的script语法，在script里面进行表达式解析，最后进行排序。
ElasticSearch 倒排索引 简介
nvd11的专栏
09-12 432
对数据分析， 拆分出数据中的词条(keyword), 以词条作为key, 对应的数据存储位置作为value， 实现索引的存储。这种索引称为倒排索引(revested index) ， 倒排索引是Document 写入ElasticSearch 时分析维护的。实际上， 我们对ES的搜索肯定是基于某个字段的条件的， 然后我们就可以根据上面的keyword 和 存储位置的mapping快速找到对应的数据。但是词条具体是怎么拆的， 用的什么拆词器， 在深入了解ES的时候才会接触到。
使用python查询Elasticsearch并导出所有数据
热门推荐
fwj_ntu的博客
02-21 3万+
作为数据分析师，要学的可真多！但一旦触及到数据，无论它在藏在哪里，只要我们想要使用，就真是无所不用其极阿，python刀操起来~ 刚开始一直通过Kibana提供的工具来查询存储在Elasticsearch中的数据，统计个结果完全没问题。偶一日不仅仅是需要查询统计个结果，而是要对满足条件的结果近一步分析，此时发现手头的Kibana有点囧… 我神气的python出场啦 为了实现自己的需求，搬了会砖，又...
ES的查询过程、倒排索引
放羊的大飞
05-23 2079
一、ES的搜索过程： 1、query phase 查询阶段： 1.客户端发送请求，接受到的节点变成coordinate node协调节点； 2.协调节点将搜索请求广播给：该索引中每个节点的副本分片or主分片； 3.每个分片将自己的搜索结果(一些doc id)返回给协调节点，由协调节点做数据的合并、排序、分页等操作，产出最终的查询结果； 2、fetch phase 取回阶段： 4.协调节点根据查询阶段得到的结果集(doc id)，向含有...
es_倒排索引详解
chuige2013的博客
03-07 2556
这也许是你全网你能找到的最详细的倒排索引的底层解读。博主把倒排索引的讲解划分为以下七个部分，理解难度递增，可根据自身需要选择依次阅读或者针对性阅读。通常来说，应付一般的面试，理解第一部分即可。如果需要面试搜索相关业务的岗位，需要深层次理解倒排索引，可根据自身情况选择阅读。
ES倒排序索引
weixin_39682289的博客
11-17 3158
在学习Elasticsearch的使用前，我们先来了解下es是如何实现全文搜索的。倒排索引是 Elasticsearch 中非常 重要的索引结构，从 文档单词到文档 ID 的过程。
Elastic Search 浅浅认识 快速使用 keyword 和 text 的区别之处 spring boot 集成案例 es 增删改查
Chenhui98的博客
09-04 1541
es 课先理解为一种数据库，kibana是es引擎的一个可视化平台部分加粗的字体都是后续章节需要挖掘的内容。它是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便地使大量数据具有搜索、分析和探索的能力。充分利用Elasticsearch的水平伸缩性，能使数据在生产环境变得更有价值。Elasticsearch 的实现原理首先用户将数据提交到Elasticsearch 数据库中再通过分词控制器去将对应的语句分词将其权重和分词结果一并存入数据当用户搜索数据时候，再根据权重将结果排名，打分。
22图详解ElasticSearch 使用教程
良月柒
09-19 1032
程序员的成长之路互联网/程序员/技术/资料共享关注阅读本文大概需要 12分钟。来自：r6a.cn/cyJw本文介绍了ElasticSearch的必备知识：从入门、索引管理到映射详解。...
ES 文档与索引介绍
「 虚幻私塾」
04-15 3737
Python微信订餐小程序课程视频 https://blog.csdn.net/m0_56069948/article/details/122285951 Python实战量化交易理财系统 https://blog.csdn.net/m0_56069948/article/details/122285941 在之前的文章中，介绍了 ES 整体的架构和内容，这篇主要针对 ES 最小的存储单位 - 文档以及由文档组成的索引进行详细介绍。 会涉及到如下的内容： 文档的 CURD 操作。 Dynamic Mapp
Elasticsearch 笔记 倒排索引 keyword 和 text
haojiliang
03-19 1290
https://blog.iaiot.com/elasticsearch-notes.html 1.倒排索引(Inverted Index)：倒排索引是实现“单词-文档矩阵”的一种具体存储形式，通过倒排索引，可以根据单词快速获取包含这个单词的文档列表。倒排索引主要由两个部分组成：“单词词典”和“倒排文件”。 原文：http://www.cnblogs.com/zlslch/p/6440114....
[ElasticSearch]数据类型keyword和text的区别
Lionel的博客
10-27 3万+
ElasticSearch数据类型keyword和text的区别在 ES2.x 版本字符串数据是没有 keyword 和 text 类型的，只有string类型，ES更新到5版本后，取消了 string 数据类型，代替它的是 keyword 和 text 数据类型，那么 keyword 和 text 有什么区别了？ Text 数据类型被用来索引长文本，比如说电子邮件的主体部分或者一款产品的介绍。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

rlanffy

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值