码迷,mamicode.com
首页 > 其他好文 > 详细

【吴恩达机器学习】学习笔记——梯度下降

时间:2018-02-19 23:20:11      阅读:228      评论:0      收藏:0      [点我收藏+]

标签:帮助   最小值   参数   机器   sub   bubuko   算法   pos   png   

 梯度下降算法能够帮助我们快速得到代价函数的最小值 技术分享图片

算法思路:

  • 以某一参数为起始点
  • 寻找下一个参数使得代价函数的值减小,直到得到局部最小值

梯度下降算法:

  • 重复下式直至收敛,其中α为学习速率,表示找到局部最小值的速率
  • 并且各参数θ0,...,θn必须同时更新,即所有的θj值全部都计算得到新值之后才将参数值代入到代价函数中

技术分享图片

数学原理:沿梯度方向,函数变化率/方向导数最大

【吴恩达机器学习】学习笔记——梯度下降

标签:帮助   最小值   参数   机器   sub   bubuko   算法   pos   png   

原文地址:https://www.cnblogs.com/JJJanepp/p/8454599.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!