机器学习
凸优化
最优化
牛顿法
拟牛顿法

牛顿法中沿牛顿方向下降(步长为1时)会不会越过某局部最优点?

关注者
3
被浏览
1,638

1 个回答

如果目标函数不是二次函数,很有可能,修改步长即可,不一定要是1。修改的方法,可以用线性搜索步长,初学者可以用二分法,armijo或者wolfe-powell方法。

貌似这种方法叫阻尼牛顿法,但是我的教材直接把阻尼牛顿法称为牛顿法了。

发布于 2018-12-14 15:35