第13章 数据存储结构
依据原书第7版完整目录覆盖8个节点:从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问
第13章 数据存储结构
本课程对应Abraham Silberschatz、Henry F. Korth、S. 在“第13章 数据存储结构”的证据链中,Sudarshan著,杨冬青、李红燕、张金波等译《数据库系统概念(原书第7版)》,机械工业出版社2021年6月出版,820页,ISBN 9787111681816。原版第7版由McGraw-Hill于2019年发布。课程按原书11部分、32章与附录A逐项重构,不复制原文。
中文版第7版纸书正文收录第1-23章;第24-26章由中文版提供中文在线内容;第27-32章是原版官网英文在线章节;附录A在纸书中。本页媒介为“纸书正文”。 全课程另设学习地图与总复习,共35页;正式知识分母仍是32章与附录A。本页属于“第五部分 存储管理与索引”,依据正式目录覆盖8个节点。
“第13章 数据存储结构”没有使用未获授权的中文纸书正文;以 作者官网第 7 版完整目录 界定 32 章与附录 A,以 作者公开在线章节、大学模式实验 和 McGraw-Hill 第 7 版变更说明 核对可公开内容。中文解释、SQL、图示、实验与练习均为独立教学重写;实现行为再以 PostgreSQL 官方文档 等一手规范复核。
学习目标
- 能解释“第13章 数据存储结构”的8个正式节点,并把它们连接到“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”主线。
- 能复现页剖面图、槽目录实验、缓冲命中轨迹和行列存储对照,记录输入版本、配置、预期、实际结果与失败边界。
- 能比较至少两种实现或故障条件,证明“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”。
- 能设计反例推翻“把逻辑行号当物理地址,或在淘汰脏页时忽略日志持久化顺序”,并给出修复、回退和独立验收条件。
从一次可观察状态变化开始
先预测:给定一份固定的大学数据库、一个操作和一个故障时刻,哪些逻辑行、物理页、锁、版本或日志记录应该变化,哪些绝不能变化?不要先运行再解释。把预测写成状态表,然后用独立查询、执行统计、页或日志轨迹核对。若预测与观察不一致,先检查模型和实验边界,而不是立即改配置。
本页主问题是“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”。交付不以读完为准,而以另一位学习者能从页剖面图、槽目录实验、缓冲命中轨迹和行列存储对照复现同一结论为准。最小正确性合同是:记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载。
核心词汇与系统边界
↡记录是“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”中的第1个核心概念;必须由状态、机制、反例和证据共同定义、↡槽页是“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”中的第2个核心概念;必须由状态、机制、反例和证据共同定义、↡文件组织是“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”中的第3个核心概念;必须由状态、机制、反例和证据共同定义、↡缓冲池是“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”中的第4个核心概念;必须由状态、机制、反例和证据共同定义、↡列式存储是“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”中的第5个核心概念;必须由状态、机制、反例和证据共同定义 构成本页词汇表。每个词都要回答四个问题:它约束什么状态,由哪个模块执行,在哪个故障或并发边界会失效,用什么证据发现失效。只给一句名词解释不构成掌握。
定长与变长记录的存放方式影响空间利用与访问成本,页内槽目录管理记录位置。
第七版机制逐项深读
13.1 数据库存储体系结构
在“第13章 数据存储结构”中,“13.1 数据库存储体系结构”划分计算、存储与协调责任;设计评审要标出故障域、状态所有者、网络往返和扩缩容时的一致性边界。
13.2 文件组织
在“第13章 数据存储结构”中,“13.2 文件组织”定义元组如何编码、定位和缓存;页布局、空闲空间、淘汰与脏页刷写共同决定 I/O 和崩溃边界。
13.3 文件中的记录组织
在“第13章 数据存储结构”中,“13.3 文件中的记录组织”定义元组如何编码、定位和缓存;页布局、空闲空间、淘汰与脏页刷写共同决定 I/O 和崩溃边界。
13.4 数据字典存储
在“第13章 数据存储结构”中,“13.4 数据字典存储”定义元组如何编码、定位和缓存;页布局、空闲空间、淘汰与脏页刷写共同决定 I/O 和崩溃边界。
13.5 数据库缓冲区
在“第13章 数据存储结构”中,“13.5 数据库缓冲区”定义元组如何编码、定位和缓存;页布局、空闲空间、淘汰与脏页刷写共同决定 I/O 和崩溃边界。
13.6 列式存储
在“第13章 数据存储结构”中,“13.6 列式存储”定义元组如何编码、定位和缓存;页布局、空闲空间、淘汰与脏页刷写共同决定 I/O 和崩溃边界。
13.7 内存数据库的存储组织
在“第13章 数据存储结构”中,“13.7 内存数据库的存储组织”定义元组如何编码、定位和缓存;页布局、空闲空间、淘汰与脏页刷写共同决定 I/O 和崩溃边界。
13.8 小结
在“第13章 数据存储结构”中,“13.8 小结”组织“依据原书第7版完整目录覆盖8个节点:从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”的语义、结构、执行和证据;若不能给出一个状态变化与独立对账,本节点仍未完成。
机制推演:从语义到物理证据
槽页用稳定槽号隔离记录移动,文件组织决定插入与扫描成本,数据字典描述对象与统计信息。缓冲池把有限内存分配给热页;列式布局减少分析查询读取的无关属性,却会改变写入和点查成本。
推演时始终区分五层。在“第13章 数据存储结构”的证据链中,第一层是业务不变量,说明哪些数据库状态合法;第二层是逻辑模型与查询语义,说明结果应该是什么;第三层是物理计划和数据结构,说明系统怎样得到结果;第四层是并发、日志与复制协议,说明交错和故障后仍保留哪些承诺;第五层是观测证据,说明我们怎样知道前四层真的成立。性能优化只能改变第三层和部分第四层的实现,不能悄悄改变前两层。
对每个节点建立因果链:输入版本与配置 → 操作或调度 → 中间状态 → 可观察输出 → 独立对账。在“第13章 数据存储结构”的证据链中,若结论涉及性能,报告中位数、尾延迟、吞吐、I/O和等待,而不是只截一条最快记录;若涉及正确性,至少准备一个应成功样本和一个应失败样本,并记录错误类别或恢复终点。
证据解释与交接
语义证据证明结果定义没有漂移。保存关系模式、约束、查询文本、参数、隔离级别和预期行集;涉及NULL、重复、顺序或聚集时,单独列出处理规则。任何实现比较都必须共享同一语义合同。
执行证据证明机制判断可以复核。保存计划、实际行数、缓冲命中、I/O、锁或版本、日志位置和错误状态中与本章相关的部分。计划估计与实际偏差本身就是结果,不应通过只截取计划名称隐藏。
失败证据证明边界真实存在。每次只注入一个变量:空输入、重复键、倾斜、并发冲突、进程崩溃、存储丢失或网络分区。明确失败前最后一个持久状态、恢复后第一个可用状态,以及是否需要人工介入。
交接证据让另一位学习者无需口头补充就能复现。最少包括版本卡、大学模式加载与重置脚本、预测表、页剖面图、槽目录实验、缓冲命中轨迹和行列存储对照、正常与失败轨迹、独立对账、已知限制和回退条件。若更换DBMS或版本,先重跑基线再比较。
本章回顾
重新完成“从记录布局、文件组织、目录和缓冲替换解释一行数据如何落页与被重新访问”:先声明不变量和输入版本,按8个目录节点建立模型,手算正常路径,注入一个边界或故障,收集语义与执行证据,最后由独立查询对账。最终交付页剖面图、槽目录实验、缓冲命中轨迹和行列存储对照,并能证明“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”。
小结
- 记录布局影响页内空间利用
- 堆、顺序、散列文件组织各异
- 数据目录登记模式与统计
- 缓冲替换策略影响命中率
- 一行数据的旅程:页、槽、缓冲
复习与独立验收
练习
问题 1:为什么“第13章 数据存储结构”必须覆盖8个目录节点?
问题 2:本页最小正确性合同是什么?
问题 3:怎样构造能推翻常见错误的最小反例?
问题 4:为什么执行成功不能证明数据库设计正确?
问题 5:性能结论至少需要哪些数据?
问题 6:独立交接至少包含什么?
名词解释
本章出现的专业名词,用大白话再讲一遍。
- 记录
记录在本页中以“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”为正确性边界,并由可重放实验验证。
- 槽页
槽页在本页中以“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”为正确性边界,并由可重放实验验证。
- 文件组织
文件组织在本页中以“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”为正确性边界,并由可重放实验验证。
- 缓冲池
缓冲池在本页中以“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”为正确性边界,并由可重放实验验证。
- 列式存储
列式存储在本页中以“记录边界与页指针在更新后有效,缓冲脏页遵守日志先行,列式与行式选择匹配工作负载”为正确性边界,并由可重放实验验证。