第24章 高级索引技术

依据原书第7版完整目录覆盖6个节点:深入比较概率过滤、写优化层次、压缩位图、空间划分与动态哈希

第24章 高级索引技术

本课程对应Abraham Silberschatz、Henry F. Korth、S. 在“第24章 高级索引技术”的证据链中,Sudarshan著,杨冬青、李红燕、张金波等译《数据库系统概念(原书第7版)》,机械工业出版社2021年6月出版,820页,ISBN 9787111681816。原版第7版由McGraw-Hill于2019年发布。课程按原书11部分、32章与附录A逐项重构,不复制原文。

中文版第7版纸书正文收录第1-23章;第24-26章由中文版提供中文在线内容;第27-32章是原版官网英文在线章节;附录A在纸书中。本页媒介为“中文在线章节”。 全课程另设学习地图与总复习,共35页;正式知识分母仍是32章与附录A。本页属于“第九部分 高级主题”,依据正式目录覆盖6个节点。

“第24章 高级索引技术”没有使用未获授权的中文纸书正文;以 作者官网第 7 版完整目录 界定 32 章与附录 A,以 作者公开在线章节大学模式实验McGraw-Hill 第 7 版变更说明 核对可公开内容。中文解释、SQL、图示、实验与练习均为独立教学重写;实现行为再以 PostgreSQL 官方文档 等一手规范复核。

学习目标

  • 能解释“第24章 高级索引技术”的6个正式节点,并把它们连接到“深入比较概率过滤、写优化层次、压缩位图、空间划分与动态哈希”主线。
  • 能复现布隆过滤误判曲线、LSM压实轨迹、位图运算和空间查询对照,记录输入版本、配置、预期、实际结果与失败边界。
  • 能比较至少两种实现或故障条件,证明“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”。
  • 能设计反例推翻“把布隆过滤器当精确集合,或压实时忽略墓碑与旧版本导致数据复活”,并给出修复、回退和独立验收条件。

从一次可观察状态变化开始

先预测:给定一份固定的大学数据库、一个操作和一个故障时刻,哪些逻辑行、物理页、锁、版本或日志记录应该变化,哪些绝不能变化?不要先运行再解释。把预测写成状态表,然后用独立查询、执行统计、页或日志轨迹核对。若预测与观察不一致,先检查模型和实验边界,而不是立即改配置。

本页主问题是“深入比较概率过滤、写优化层次、压缩位图、空间划分与动态哈希”。交付不以读完为准,而以另一位学习者能从布隆过滤误判曲线、LSM压实轨迹、位图运算和空间查询对照复现同一结论为准。最小正确性合同是:概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果

核心词汇与系统边界

构成本页词汇表。每个词都要回答四个问题:它约束什么状态,由哪个模块执行,在哪个故障或并发边界会失效,用什么证据发现失效。只给一句名词解释不构成掌握。

高级索引
高级索引布隆过滤、LSM、压缩与空间索引;点击节点查看详情1布隆过滤器2LSM 树3空间索引
布隆过滤器

概率型存在性判断:可能有假阳性绝无假阴性,用极小内存挡掉无效查找。

第七版机制逐项深读

24.1 布隆过滤器

在“第24章 高级索引技术”中,分析“24.1 布隆过滤器”先固定键分布与谓词选择率,再比较全表扫描、树、哈希或位图路径的真实页访问。

24.2 日志结构合并树及其变体

在“第24章 高级索引技术”中,“24.2 日志结构合并树及其变体”的物理算法可以变化,但逻辑语义不可漂移;证据应同时保存手算结果和数据库返回结果。

24.3 位图索引

在“第24章 高级索引技术”中,分析“24.3 位图索引”先固定键分布与谓词选择率,再比较全表扫描、树、哈希或位图路径的真实页访问。

24.4 空间数据索引

在“第24章 高级索引技术”中,“24.4 空间数据索引”的可移植边界由标准与具体 DBMS 共同决定;课程结论必须标明哪一层提供保证。

24.5 哈希索引

在“第24章 高级索引技术”中,“24.5 哈希索引”用额外结构换取定位速度;必须同时计算搜索 I/O、维护成本、空间和范围查询能力。

24.6 小结

在“第24章 高级索引技术”中,“24.6 小结”组织“依据原书第7版完整目录覆盖6个节点:深入比较概率过滤、写优化层次、压缩位图、空间划分与动态哈希”的语义、结构、执行和证据;若不能给出一个状态变化与独立对账,本节点仍未完成。

机制推演:从语义到物理证据

布隆过滤器用多个哈希位快速排除不存在键,不能确认存在;LSM把写入积累在内存和有序层,后台压实合并版本与墓碑。位图和空间结构利用不同数据分布,评价时需量化误判、写放大与查询剪枝。

推演时始终区分五层。在“第24章 高级索引技术”的证据链中,第一层是业务不变量,说明哪些数据库状态合法;第二层是逻辑模型与查询语义,说明结果应该是什么;第三层是物理计划和数据结构,说明系统怎样得到结果;第四层是并发、日志与复制协议,说明交错和故障后仍保留哪些承诺;第五层是观测证据,说明我们怎样知道前四层真的成立。性能优化只能改变第三层和部分第四层的实现,不能悄悄改变前两层。

对每个节点建立因果链:输入版本与配置 → 操作或调度 → 中间状态 → 可观察输出 → 独立对账。在“第24章 高级索引技术”的证据链中,若结论涉及性能,报告中位数、尾延迟、吞吐、I/O和等待,而不是只截一条最快记录;若涉及正确性,至少准备一个应成功样本和一个应失败样本,并记录错误类别或恢复终点。

证据解释与交接

语义证据证明结果定义没有漂移。保存关系模式、约束、查询文本、参数、隔离级别和预期行集;涉及NULL、重复、顺序或聚集时,单独列出处理规则。任何实现比较都必须共享同一语义合同。

执行证据证明机制判断可以复核。保存计划、实际行数、缓冲命中、I/O、锁或版本、日志位置和错误状态中与本章相关的部分。计划估计与实际偏差本身就是结果,不应通过只截取计划名称隐藏。

失败证据证明边界真实存在。每次只注入一个变量:空输入、重复键、倾斜、并发冲突、进程崩溃、存储丢失或网络分区。明确失败前最后一个持久状态、恢复后第一个可用状态,以及是否需要人工介入。

交接证据让另一位学习者无需口头补充就能复现。最少包括版本卡、大学模式加载与重置脚本、预测表、布隆过滤误判曲线、LSM压实轨迹、位图运算和空间查询对照、正常与失败轨迹、独立对账、已知限制和回退条件。若更换DBMS或版本,先重跑基线再比较。

本章回顾

重新完成“深入比较概率过滤、写优化层次、压缩位图、空间划分与动态哈希”:先声明不变量和输入版本,按6个目录节点建立模型,手算正常路径,注入一个边界或故障,收集语义与执行证据,最后由独立查询对账。最终交付布隆过滤误判曲线、LSM压实轨迹、位图运算和空间查询对照,并能证明“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”。

小结

  • 布隆过滤器用概率换空间
  • LSM 层次优化写入路径
  • 压缩位图服务分析负载
  • 空间索引处理邻近查询
  • 动态哈希随数据增长扩展

复习与独立验收

练习

问题 1:为什么“第24章 高级索引技术”必须覆盖6个目录节点?

问题 2:本页最小正确性合同是什么?

问题 3:怎样构造能推翻常见错误的最小反例?

问题 4:为什么执行成功不能证明数据库设计正确?

问题 5:性能结论至少需要哪些数据?

问题 6:独立交接至少包含什么?

名词解释

本章出现的专业名词,用大白话再讲一遍。

布隆过滤器

布隆过滤器在本页中以“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”为正确性边界,并由可重放实验验证。

假阳性

假阳性在本页中以“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”为正确性边界,并由可重放实验验证。

LSM树

LSM树在本页中以“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”为正确性边界,并由可重放实验验证。

压实

压实在本页中以“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”为正确性边界,并由可重放实验验证。

空间索引

空间索引在本页中以“概率结构只产生可量化的假阳性,合并与分裂不丢数据,查询能跨所有有效层得到完整结果”为正确性边界,并由可重放实验验证。

← 上一页:第23章 并行与分布式事务处理 · 下一页:第25章 高级应用开发 →

讨论

评论区加载中…