牛頓法求解最優(yōu)化問題 梯度法和牛頓法求的最優(yōu)解是全局最優(yōu)還是局部最優(yōu)?
梯度法和牛頓法求的最優(yōu)解是全局最優(yōu)還是局部最優(yōu)?簡(jiǎn)單梯度下降算法收斂到局部最優(yōu)解。如果需要全局最優(yōu)解,可以考慮采用退火算法或遺傳算法的思想??傊?,在搜索過程中,不僅有基于梯度下降的方向搜索,還有少量的
梯度法和牛頓法求的最優(yōu)解是全局最優(yōu)還是局部最優(yōu)?
簡(jiǎn)單梯度下降算法收斂到局部最優(yōu)解。如果需要全局最優(yōu)解,可以考慮采用退火算法或遺傳算法的思想??傊谒阉鬟^程中,不僅有基于梯度下降的方向搜索,還有少量的反向搜索,最后可以設(shè)置一個(gè)收斂區(qū)域。