第16章 主成分分析
覆盖总体/样本主成分、性质、个数选择与算法；用推导路径、单故障数值轨迹和结论验收门完成独立复核。
学习目标
- 能说明“第16章 主成分分析”如何覆盖总体/样本主成分、性质、个数选择与算法，并区分原版范围、独立核验和后续扩展
- 能先预测“怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？”的定义与数值路径，再用已知量、变换、残差和反例逐步复核
- 能注入“在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏”，用“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”决定接受、降级或拒绝方法结论
为什么从这个方法推演开始
PCA页同时保存保留方差与丢失方向，不把二维可视化当唯一结论。 “第16章 主成分分析”的贯穿任务是：对二维相关数据手算PCA，比较中心化前后与一维重构。 动手前先写下哪个定义、矩阵、分布、目标或迭代状态会变化；运行后补理由不算预测。
本页围绕“怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？”建立参考、故障与恢复路径。只有“第16章 主成分分析”守住“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”并交付拟合索引、均值/尺度、协方差、特征值/向量、解释方差、投影、逆变换与重构残差。，公式、图形或指标才构成统计学习证据。
书目、285个原版层级与版本边界
“第16章 主成分分析”以清华大学出版社官方书页核对李航著《统计学习方法（第2版）》于2019年出版、ISBN 9787302517276和监督/无监督两篇结构，同时以出版社英文版权页确认484页及两篇主要内容，再以出版社公开完整目录逐项核对两篇、22章、256个编号节/小节和附录A-E，因此本站覆盖分母共285个正式目录层级。
“第16章 主成分分析”未取得原书完整正文授权，只以出版社完整目录限定范围；中文解释、推导、数值实验、交互、练习与答案均为独立教学重写。“第16章 主成分分析”按2019年第2版范围解释；当前库函数和后续研究只作独立核验，不反写原版。
本页另以技术核对 1、技术核对 2、技术核对 3核对算法原始定义、实现语义或数值工具。外部资料能验证技术事实，不能反向证明原书正文采用了本站表述。
原版目录层级与方法机制
第16章 主成分分析
↡主成分分析对应原版目录坐标“第16章 主成分分析”，在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 1/11。 在“第16章 主成分分析”的坐标1中，目录项「第16章 主成分分析」用于由中心化协方差求主方向并量化方差保留；先冻结符号与形状，再以均值/尺度、协方差、特征值/向量、投影与重构复核，出现全量数据拟合主方向时撤回结论。
16.1 总体主成分分析
↡总体主成分分析对应原版目录坐标“16·1 总体主成分分析”，在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 2/11。 目录项「16·1 总体主成分分析」进入“第16章 主成分分析”后要回答第2个方法问题：它怎样由中心化协方差求主方向并量化方差保留、改变什么数值状态、由哪些均值/尺度、协方差、特征值/向量、投影与重构证明，并如何排除全量数据拟合主方向。
16.1.1 基本想法
↡基本想法对应原版目录坐标“16·1·1 基本想法”，在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 3/11。 围绕“怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？”，在“第16章 主成分分析”的原版层级3把「16·1·1 基本想法」落实为把目录坐标转为有定义、推导、计算和验收的统计学习合同；复核者先读取变量、假设、目标、更新、数值残差、评估和边界反例，不能接受只复述结论或公式名称。
16.1.2 定义和导出
↡定义和导出对应原版目录坐标“16·1·2 定义和导出”，在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 4/11。 对“第16章 主成分分析”而言，目录项「16·1·2 定义和导出」的最小推演合同是把目录坐标转为有定义、推导、计算和验收的统计学习合同，第4次检查保存变量、假设、目标、更新、数值残差、评估和边界反例；若产生只复述结论或公式名称，就返回上一步。
16.1.3 主要性质
↡主要性质对应原版目录坐标“16·1·3 主要性质”，在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 5/11。 第5个正式坐标「16·1·3 主要性质」服务于覆盖总体/样本主成分、性质、个数选择与算法，需要以变量、假设、目标、更新、数值残差、评估和边界反例呈现把目录坐标转为有定义、推导、计算和验收的统计学习合同；只复述结论或公式名称会破坏“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”。
16.1.4 主成分的个数
↡主成分的个数对应原版目录坐标“16·1·4 主成分的个数”，在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 6/11。 在“第16章 主成分分析”的坐标6中，目录项「16·1·4 主成分的个数」用于由中心化协方差求主方向并量化方差保留；先冻结符号与形状，再以均值/尺度、协方差、特征值/向量、投影与重构复核，出现全量数据拟合主方向时撤回结论。
16.1.5 规范化变量的总体主成分
↡规范化变量的总体主成分对应原版目录坐标“16·1·5 规范化变量的总体主成分”，在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 7/11。 目录项「16·1·5 规范化变量的总体主成分」进入“第16章 主成分分析”后要回答第7个方法问题：它怎样由中心化协方差求主方向并量化方差保留、改变什么数值状态、由哪些均值/尺度、协方差、特征值/向量、投影与重构证明，并如何排除全量数据拟合主方向。
16.2 样本主成分分析
↡样本主成分分析对应原版目录坐标“16·2 样本主成分分析”，在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 8/11。 围绕“怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？”，在“第16章 主成分分析”的原版层级8把「16·2 样本主成分分析」落实为由中心化协方差求主方向并量化方差保留；复核者先读取均值/尺度、协方差、特征值/向量、投影与重构，不能接受全量数据拟合主方向。
16.2.1 样本主成分的定义和性质
↡样本主成分的定义和性质对应原版目录坐标“16·2·1 样本主成分的定义和性质”，在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 9/11。 对“第16章 主成分分析”而言，目录项「16·2·1 样本主成分的定义和性质」的最小推演合同是由中心化协方差求主方向并量化方差保留，第9次检查保存均值/尺度、协方差、特征值/向量、投影与重构；若产生全量数据拟合主方向，就返回上一步。
16.2.2 相关矩阵的特征值分解算法
↡相关矩阵的特征值分解算法对应原版目录坐标“16·2·2 相关矩阵的特征值分解算法”，在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 10/11。 第10个正式坐标「16·2·2 相关矩阵的特征值分解算法」服务于覆盖总体/样本主成分、性质、个数选择与算法，需要以变量、假设、目标、更新、数值残差、评估和边界反例呈现把目录坐标转为有定义、推导、计算和验收的统计学习合同；只复述结论或公式名称会破坏“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”。
16.2.3 数据矩阵的奇异值分解算法
↡数据矩阵的奇异值分解算法对应原版目录坐标“16·2·3 数据矩阵的奇异值分解算法”，在“第16章 主成分分析”中用于以正交子空间和奇异值分解、截断并重构矩阵，并受定义域、形状、目标、算法状态与版本边界约束。原版坐标 11/11。 在“第16章 主成分分析”的坐标11中，目录项「16·2·3 数据矩阵的奇异值分解算法」用于以正交子空间和奇异值分解、截断并重构矩阵；先冻结符号与形状，再以形状、秩、U/S/Vh、正交残差、谱与重构误差复核，出现矩阵方向或截断对象错误时撤回结论。
先预测，再操作三个章专属实验
1. 定义、推导与变换路径
固定“对二维相关数据手算PCA，比较中心化前后与一维重构。”，在参考与反例间切换，逐阶段查看“中心化样本、协方差矩阵、特征分解、分量选择、投影重构”的已知量、变换、结果和数值检查。
推导路径
选择案例，逐步核对已知量与变换
怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？
问题设置
对二维相关数据手算PCA，比较中心化前后与一维重构。 固定符号、数据、初值、顺序、容差和种子。
事前预测
沿“中心化样本 → 协方差矩阵 → 特征分解 → 分量选择 → 投影重构”得到可复核结果。
适用边界
全过程必须满足“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”。
已知量
第16章 主成分分析：声明对象、符号与适用域，冻结数据、形状和版本
变换或更新
只读取本步允许的已知量，并持续满足“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”
阶段结果
中心化样本产生形式化问题状态
数值与逻辑检查
形式化问题状态、索引和数值断言；出现“在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏”时停止
原版坐标：第16章 主成分分析、16.1 总体主成分分析、16.1.1 基本想法、16.1.2 定义和导出、16.1.3 主要性质、16.1.4 主成分的个数、16.1.5 规范化变量的总体主成分、16.2 样本主成分分析、16.2.1 样本主成分的定义和性质、16.2.2 相关矩阵的特征值分解算法、16.2.3 数据矩阵的奇异值分解算法
第16章 主成分分析的可重放方法协议
| 阶段 | 允许动作 | 必留证据 | 拒绝条件 |
|---|---|---|---|
| 中心化样本 | 在“第16章 主成分分析”执行中心化样本，只改变声明的数学或数值状态 | 符号、定义域、形状、数据与版本 | 对象或形状不可追溯 |
| 协方差矩阵 | 在“第16章 主成分分析”执行协方差矩阵，只改变声明的数学或数值状态 | 模型、目标、约束、参数/隐变量与迭代轨迹 | 在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏 |
| 特征分解 | 在“第16章 主成分分析”执行特征分解，只改变声明的数学或数值状态 | 模型、目标、约束、参数/隐变量与迭代轨迹 | 在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏 |
| 分量选择 | 在“第16章 主成分分析”执行分量选择，只改变声明的数学或数值状态 | 模型、目标、约束、参数/隐变量与迭代轨迹 | 在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏 |
| 投影重构 | 在“第16章 主成分分析”执行投影重构，只改变声明的数学或数值状态 | 残差、诊断、反例、适用边界与复现 | 无法重放或缺少诊断 |
unit: "slm-16"
question: "怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？"
scenario: "对二维相关数据手算PCA，比较中心化前后与一维重构。"
stages: ["中心化样本", "协方差矩阵", "特征分解", "分量选择", "投影重构"]
invariant: "样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定"
fault: "在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏"
evidence: "拟合索引、均值/尺度、协方差、特征值/向量、解释方差、投影、逆变换与重构残差。"
reset: restore_case_stage_trace_mode_step_gates_and_artifact该协议要求“第16章 主成分分析”在相同符号、数据、形状、初值、顺序、容差和种子下重放。重置后若案例、阶段、轨迹模式、步骤、结论门或证据包没有回到基线，交互状态已经污染比较。
本页回顾
掌握“第16章 主成分分析”不是背诵公式或API，而是能围绕“怎样从中心化协方差得到主方向，并同时解释方差保留和信息丢失？”重建定义与数值证据，并用“样本方向、中心化/尺度统计、协方差分母、拟合索引、分量数和符号固定”拒绝“在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏”。最终交付为拟合索引、均值/尺度、协方差、特征值/向量、解释方差、投影、逆变换与重构残差。
练习与答案
练习
- 问题 1：方法合同。 “第16章 主成分分析”为什么必须先冻结符号、数据、形状、初值、顺序、容差和种子？
- 问题 2：目录逐项覆盖。 怎样证明原版目录坐标已经进入机制、交互和练习？
- 问题 3：故障恢复。 怎样证明“在全量含测试样本的数据上拟合中心与主方向，导致下游评估泄漏”已经被修正？
名词解释
名词解释
本章出现的专业名词，用大白话再讲一遍。
- 主成分分析
检索键 slm-A 对应目录坐标「第16章 主成分分析」；在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，需要连接原版范围、定义、数值状态与独立证据。
- 总体主成分分析
检索键 slm-B 对应目录坐标「16·1 总体主成分分析」；在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，需要连接原版范围、定义、数值状态与独立证据。
- 基本想法
检索键 slm-C 对应目录坐标「16·1·1 基本想法」；在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，需要连接原版范围、定义、数值状态与独立证据。
- 定义和导出
检索键 slm-D 对应目录坐标「16·1·2 定义和导出」；在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，需要连接原版范围、定义、数值状态与独立证据。
- 主要性质
检索键 slm-E 对应目录坐标「16·1·3 主要性质」；在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，需要连接原版范围、定义、数值状态与独立证据。
- 主成分的个数
检索键 slm-F 对应目录坐标「16·1·4 主成分的个数」；在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，需要连接原版范围、定义、数值状态与独立证据。
- 规范化变量的总体主成分
检索键 slm-G 对应目录坐标「16·1·5 规范化变量的总体主成分」；在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，需要连接原版范围、定义、数值状态与独立证据。
- 样本主成分分析
检索键 slm-H 对应目录坐标「16·2 样本主成分分析」；在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，需要连接原版范围、定义、数值状态与独立证据。
- 样本主成分的定义和性质
检索键 slm-I 对应目录坐标「16·2·1 样本主成分的定义和性质」；在“第16章 主成分分析”中用于由中心化协方差求主方向并量化方差保留，需要连接原版范围、定义、数值状态与独立证据。
- 相关矩阵的特征值分解算法
检索键 slm-J 对应目录坐标「16·2·2 相关矩阵的特征值分解算法」；在“第16章 主成分分析”中用于把目录坐标转为有定义、推导、计算和验收的统计学习合同，需要连接原版范围、定义、数值状态与独立证据。
- 数据矩阵的奇异值分解算法
检索键 slm-K 对应目录坐标「16·2·3 数据矩阵的奇异值分解算法」；在“第16章 主成分分析”中用于以正交子空间和奇异值分解、截断并重构矩阵，需要连接原版范围、定义、数值状态与独立证据。