机器学习数学推导（十二）：XGBoost 与 LightGBM

Sat, 31 Jan 2026 09:00:00 +0000

XGBoost 和 LightGBM 是表格数据领域的两大利器——从 Kaggle 排行榜到风控系统、广告排序和用户流失预测，背后几乎都有它们的身影。两者都基于梯度提升树（Gradient-Boosted Trees，见第 11 篇），但在工程设计上选择了截然不同的方向：

XGBoost on Chen Kai Blog