第 14 章：统计异常检测
“虽然每片雪花都是独一无二的，但有些雪花实在是太独特了。”
在文本分析项目中，我们的目标不仅是聚类（发现常态），更是风险挖掘。
什么是风险？风险通常意味着“异常”。
* 大部分工单都在说“快递慢”（常态）。
* 突然有一条工单说“快递员在门口放火”（异常）。
如何用数学定义“异常”？最古老也最经久不衰的方法是统计学。
统计学告诉我们：“正常”就是大多数，“异常”就是极少数。
(图注：在正态分布中，落在 3σ 之外的区域就是异常区。)
1. 核心概念：你离平均值有多远？
1.1 正态分布假设 (The Normal Assumption)
统计方法的核心假设是：正常数据服从
第 13 章：UMAP原理与实践
“数学家在咖啡杯和甜甜圈之间看到了同伦，UMAP 在高维数据和二维流形之间看到了同构。”
t-SNE 统治了数据可视化界很多年，直到 2018 年 McInnes 等人提出了 UMAP。
UMAP (Uniform Manifold Approximation and Projection) 建立在深奥的代数拓扑和黎曼几何理论之上，但它的效果却是立竿见影的：
它比 t-SNE 快得多，且保留了更多的全局结构。
在实际的文本分析项目中（如 BERT/OpenAI Embedding），UMAP 已经逐渐成为首选的降维引擎，正是看中了它在速度和结构保持上的平衡能力。
(图注：UMAP 像搭
第 12 章：t-SNE深度解析
“在数据可视化的世界里，t-SNE 就是那个把乱麻理顺的魔术师。”
如果你在 Kaggle 上看过别人的 Kernel，你一定见过那种把 MNIST 手写数字完美分成 10 堆彩色小岛的图。
这种令人惊叹的“分堆”效果，90% 都是 t-SNE (t-分布随机邻域嵌入) 的功劳。
它不是在做数学投影（像 PCA 那些线性代数游戏），而是在做概率匹配。它强迫低维空间中的点，必须模仿高维空间中的社交关系。
本章我们将深入这个稍微有点复杂的算法内部，掰开揉碎了讲讲它是如何利用“学生 t 分布”来解决拥挤问题的。
(图注：上图是高维空间，下图是低维空间。t-SNE 通过梯度下降，不断移动下图中
第 11 章：非线性降维基础
“地球是圆的，但地图是平的。把球面画成平面的过程，就是流形学习。”
PCA 假设数据分布在一个平坦的超平面上。但现实世界的数据往往是卷曲的、扭曲的。
经典的例子是 “瑞士卷” (Swiss Roll) 数据集。数据像一块卷起来的地毯。
如果你直接用 PCA 从侧面压扁它（线性投影），原本相隔很远的两层会叠在一起，红色的点和蓝色的点就混淆了。这就叫投影混叠。
我们需要把这个卷小心翼翼地展开，就像把地毯铺平一样。这叫 流形学习 (Manifold Learning)。
1. 核心概念：流形假设 (Manifold Hypothesis)
流形学习基于一个大胆的假设：
虽然数据看起来维数
第 10 章：线性降维：PCA
“最好的数据压缩算法，不是 zip，而是理解数据的结构。”
我们生活在一个高维数据爆炸的时代。
* 图像：一张 100x100 像素的小头像，如果展平，就是 10,000 维的向量。
* 文本：一段包含 512 个 token 的文本，如果用 Embedding 表示，通常是 768 维或 1536 维。
* 用户画像：一个电商用户的特征，可能包含点击历史、购买力、地理位置等几千个指标。
在这些成千上万的维度中，往往充斥着冗余（比如“出生年份”和“年龄”完全相关）和噪声（比如图片边缘的随机噪点）。
降维 (Dimensionality Reduction) 的目标很简单：去粗取精。
