Lecture3 类神经网络训练不了怎么办(上)

课件下载 Lecture3

Local Minima 和 Saddle Point

image.png
image.png
image.png
image.png
Example
image.png
image.png
image.png
image.png
image.png
image.png

Batch 和 Momentum

image.png

Small Batch v.s. Large Batch

训练时间

image.png
image.png

训练精度

image.png
image.png

测试精度

image.png
image.png

总结

image.png

Momentum

image.png
image.png
image.png
image.png

总结

image.png

#