题目标题

梯度下降法如果陷入局部最优怎么办?

难度:初级

机器学习
参考解析

(1)可尝试随机地增大学习速率/学习步长
(2)在每个epoch/iteration后需要把数据洗牌一遍,让每个batch的数据都不一样。
(3)可以尝试设置不同的初始值
(4)尝试使用其它优化方法如Momentum梯度下降法等