码迷,mamicode.com
首页 > 其他好文 > 详细

神经网络简介

时间:2020-02-17 20:11:10      阅读:111      评论:0      收藏:0      [点我收藏+]

标签:mic   mamicode   margin   网络   梯度   play   结构   auto   过程   

网络结构

输入层、隐含层(多层)、输出层

技术图片

 单个神经元结构,g(z)为激励函数,线性组合,非线性处理

技术图片

逻辑回归

正向传播预测结果,反向传播调整w和b

技术图片

激励函数

作用:提供规模化的非线性化能力

常用:

技术图片

损失函数

单次训练损失:

技术图片

 全部训练损失:

技术图片

梯度下降

技术图片

逻辑回归梯度下降

技术图片

 同步更新

网络向量化

技术图片

技术图片

技术图片

技术图片

网络梯度下降(反向传播调参)

技术图片

训练过程

技术图片

神经网络简介

标签:mic   mamicode   margin   网络   梯度   play   结构   auto   过程   

原文地址:https://www.cnblogs.com/SCCQ/p/12323110.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!