梯度下降法和牛頓法的異同 梯度下降法與牛頓類算法各自的的優(yōu)缺點(diǎn)有哪些?
梯度下降法與牛頓類算法各自的的優(yōu)缺點(diǎn)有哪些?在二次規(guī)劃理論中,牛頓法可以一步解決問題,但梯度法肯定不止一步,對于Hessian矩陣的最大和最小特征值相差很大的二次規(guī)劃,梯度法的收斂效果很差,溶液不斷振
梯度下降法與牛頓類算法各自的的優(yōu)缺點(diǎn)有哪些?
在二次規(guī)劃理論中,牛頓法可以一步解決問題,但梯度法肯定不止一步,對于Hessian矩陣的最大和最小特征值相差很大的二次規(guī)劃,梯度法的收斂效果很差,溶液不斷振蕩