Vanishing Gradients

机器学习数学推导（十九）：神经网络与反向传播

神经网络如何学习？本文推导前向传播的矩阵形式、反向传播的链式法则逐层推导、梯度消失/爆炸的数学分析、以及 Xavier 和 He 初始化的方差保持策略。