乐途乐途
主页
  • 计算机基础

    • TCP/IP
    • Linux
    • HTTP
  • 数据库

    • SQL
    • MySQL 5.7
  • 编程语言

    • C
    • C++
    • Java SE
    • Python2
    • Python3
  • 数据格式

    • JSON
    • XML
  • 认证与安全

    • JWT
  • 工具

    • Markdown
  • Git

    • GitFlow
  • Quartz

    • Quartz
  • Java

    • Maven 入门
    • Maven 进阶
    • MyBatis
    • Spring
    • Spring MVC
  • Java

    • Spring Boot
    • Spring Cloud
    • Spring Cloud Alibaba
    • Spring Security
    • Spring AI
    • Spring Batch
    • Kafka
    • Java 设计模式
  • 缓存

    • Redis
  • 搜索引擎

    • Elasticsearch
  • 分布式协调

    • ZooKeeper
联系
阿里云
主页
  • 计算机基础

    • TCP/IP
    • Linux
    • HTTP
  • 数据库

    • SQL
    • MySQL 5.7
  • 编程语言

    • C
    • C++
    • Java SE
    • Python2
    • Python3
  • 数据格式

    • JSON
    • XML
  • 认证与安全

    • JWT
  • 工具

    • Markdown
  • Git

    • GitFlow
  • Quartz

    • Quartz
  • Java

    • Maven 入门
    • Maven 进阶
    • MyBatis
    • Spring
    • Spring MVC
  • Java

    • Spring Boot
    • Spring Cloud
    • Spring Cloud Alibaba
    • Spring Security
    • Spring AI
    • Spring Batch
    • Kafka
    • Java 设计模式
  • 缓存

    • Redis
  • 搜索引擎

    • Elasticsearch
  • 分布式协调

    • ZooKeeper
联系
阿里云
  • 学习路径
  • 全文搜索与Elasticsearch概述

    • 全文搜索与搜索引擎概述
    • Elasticsearch 与 Lucene 的关系
    • Elasticsearch 核心架构
  • 安装与快速上手

    • 安装 Elasticsearch
    • 快速上手
  • 索引、文档与映射

    • 索引
    • 文档与 CRUD
    • 元数据字段
    • 字段映射
    • 动态映射
    • Reindex 操作
  • 文本分析与分词

    • 倒排索引的构建与原理
    • 分词器组成
    • IK 分词器与自定义词典
    • 近实时搜索原理
    • Ingest Pipeline 数据预处理
  • 搜索基础(Query DSL)

    • match 查询
    • multi_match 多字段查询
    • match_phrase 短语匹配
    • term 与 terms 查询
    • range 范围查询
    • bool 查询
    • 高亮显示与分页
    • 深度分页与遍历
  • 相关性评分与排序

    • BM25 相关性评分
    • 排序与自定义评分
    • Painless 脚本基础
  • 聚合分析(Aggregations)

    • 指标聚合
    • 桶聚合
    • 管道聚合
  • 分布式集群原理

    • 节点与角色
    • 分片与副本
    • 路由
    • 选举与脑裂
    • 快照与恢复
  • 数据建模与最佳实践

    • 索引设计原则与模板
    • 嵌套对象与父子文档
  • 性能优化与运维监控

    • 写入性能优化
    • 搜索性能优化
    • ILM 索引生命周期管理
    • 集群监控与故障排查
  • 面试考点与实战场景

    • 实战案例:课程搜索引擎
    • Elasticsearch 面试考点精选

倒排索引的构建与原理

本章定位:倒排索引是全文搜索的核心数据结构。理解它的构建原理和查询时的工作方式,才能真正理解 ES 为什么快。


定义与作用

倒排索引(Inverted Index)是"词项(Term)→ 文档列表(Posting List)"的映射。与正排索引(文档→词项列表)相反。搜索时,通过检索词项直接定位包含该词的文档集合,通过交集、并集等快速运算得到结果。

解决的痛点:正排索引需要逐文档扫描判断是否包含搜索词(全表扫描),倒排索引从词出发直接定位到文档,是大数据量全文搜索的基础。


完整示例:构建倒排索引

文档 1:Python 数据分析教程
文档 2:机器学习与数据挖掘

分词后倒排:
"Python"  → [Doc1]
"数据"    → [Doc1, Doc2]
"分析"    → [Doc1]
"教程"    → [Doc1]
"机器"    → [Doc2]
"学习"    → [Doc2]
"挖掘"    → [Doc2]

搜索"数据分析":分词→"数据"+"分析"→取交集[Doc1]→直接命中

Posting List 结构

词项: "数据"
Posting List: [Doc1, Doc2]
  Doc1: 位置[2], 词频1
  Doc2: 位置[4], 词频1

词频用于 BM25 评分,位置用于 match_phrase 短语匹配。


小结

倒排索引:词→文档映射。搜索 = 词项查找 + 交集/并集运算 + BM25 评分。这是 ES 全文搜索的核心竞争力。Posting List 中的词频和位置信息支撑了评分和短语匹配。

下一页
分词器组成