当前位置: 首页 > news >正文

免费网站建设支持ftpwordpress chess

免费网站建设支持ftp,wordpress chess,上海网页制作公司,如何建网站平台卖东西上一周的课程中讲了神经网络的结构以及正向传播(feed forward)过程#xff0c;了解了神经网络是如何进行预测的#xff0c;但是预测的结果怎么和真是结果进行比较以及发现了错误如何修改还没有提及。这一周的课程中#xff0c;介绍了cost function作为结果比较的标准以及bac… 上一周的课程中讲了神经网络的结构以及正向传播(feed forward)过程了解了神经网络是如何进行预测的但是预测的结果怎么和真是结果进行比较以及发现了错误如何修改还没有提及。这一周的课程中介绍了cost function作为结果比较的标准以及backpropagation方法作为错误修改的方式。1 Cost FunctionLinear regression使用平方差来表示结果之间的差距Logistic regression使用negative log来表示结果之间的差距Neural network实际上就是k个Logistic regression的一个集合所以其cost function也是negative log的一个集合。整个网络产生的error其实就是每一个Logistic regression产生的error的和。2 Backpropagation在Logistic regression中模型是向着error的负梯度方向更新的所以需要计算cost function的梯度这在Neural Networks中也是如此只不过这次的权值θ多了一些需要一层一层慢慢求解了。假设神经网络有4层先来回顾一下一条训练数据的正向传播的情况这次我们不把bias直接加到矩阵中去了把它拿出来令为b(i)是一个列向量至此所有的偏导都求完了总结一下3Gradient Checking如果梯度计算不正确那整个模型都错了。最惨的是在训练了几个小时之后发现梯度算错了。所以梯度计算完之后需要验算一下对不对。梯度可以如下约等于验算过程如下4Random Initialization模型中权重和偏置的初始值可以随便设成任何数字但是设置成什么样直接决定了模型收敛的快慢和程度进而影响模型的performance。把权重和偏置初始化为0非常不好。因为在前向传播过程中全部初始化成0则结果就是0在得到残差之后反向传播过程中残差根据权重进行分配因为权重全部为0所以隐藏层的残差为0即权重不更新所以不能全部初始化成0权重为0的神经元是死掉的是不会更新的。另外全部初始化成同样的数字也是不好的模型将一直以同样的方式更新这些神经元。反向传播过程中残差根据权重进行分配因为权重都相同所以权重的更新也是相同的所以网络中的每一个神经元都是一样的。一般从均匀分布中随机初始化权重和偏置比如
http://www.huolong8.cn/news/207112/

相关文章:

  • 网站改版要改哪些页面凡科网做网站的图片
  • 深圳网站论坛建设七零三八零四温州论坛
  • 网站建设与管理案例教程ppt3a汽车集团公司网络营销方案
  • 手机版传奇发布网站广州专业网站改版领军企业
  • 始兴县建设局网站怎么做企业官方网站
  • 网站设计思路怎么写图片生成二维码在线制作
  • 外贸球衣网站如何制作自己的网站 可放广告
  • 企业网站建设中有哪几个重要点儿童教育 php模板 网站
  • 溧阳建设集团有限公司网站网站怎么做预约小程序
  • 商城网站建设要多少钱微信小程序怎么做
  • 工信和信息化网站备案系统龙发装饰
  • 做家常菜哪个网站最好怎样注册小程序商城
  • 怎么做网站步骤长春网站建设培训
  • 设计接单兼职网站网站如何跟域名绑定
  • 做营销网站策划有什么前景湖南邵阳建设局网站
  • 重庆建设摩托车官方网站php编程
  • 城市联盟网站怎么做在线ui设计软件
  • 建设公司的网站制作网站建设是怎么挣钱的
  • 曲阜网站建设价格网站建设 猫云seo
  • 地方门户网站的推广小型广告公司简介模板
  • 创建一个平台需要什么高级seo课程
  • 华为云上面可以代做网站吗北京seo网站优化培训
  • 怎么做二手房网站网上注册公司要钱吗
  • 网站建设 阿里云seo关键词工具
  • 网站建设版块分类全网营销
  • 著名的wordpress网站建设银行网站功能
  • 游戏类网站怎么做wordpress 修改用户头像
  • tk网站免费58同城招聘网 找工作
  • 网站开发提供图片加载速度cpanel应用不显示wordpress
  • 揭阳专业网站设计公司wordpress 分类存档