Skip to content
深度学习
搜索讲义
K
Main Navigation
首页
课程大纲
章节
交互演示
学习资源
更多
术语表
关于本站
主题
目录
回到顶部
本页目录
首页
交互演示
反向传播逐步演示
反向传播逐步演示
观察要点
反向传播就是链式法则的高效组织方式:每层只需上一层传回的 δ 与本层局部导数。
Logistic 激活的导数最大只有 0.25,层数一多 δ 迅速变小,这是梯度消失的直接原因。
把学习率调大,观察损失下降速度与是否震荡。
相关章节:
第 4 章 前馈神经网络
。