标签

L1 Regularization

Feb 8, 2026 机器学习数学推导 24 分钟

机器学习数学推导(二十):正则化与模型选择

系列收官:从偏差-方差分解出发,沿着 L1/L2 几何、Dropout 子网络采样、K 折交叉验证、AIC/BIC、VC 维到现代的双下降现象,回答机器学习理论中最深的一个问题——为什么模型能泛化。

Mar 19, 2025 线性代数 22 分钟

线性代数(十二):稀疏矩阵与压缩感知——少即是多的数学奇迹

为什么 JPEG 能把 10MB 照片压成几百 KB 而看不出差别?为什么 MRI 能从 30 分钟缩到 5 分钟?答案都是稀疏性。本章从 L1 几何到 RIP 理论,从 LASSO 到 ISTA/FISTA/IHT,把压缩感知讲通。