BP避免过拟合:dropout

链接:https://yq.aliyun.com/articles/68901


Dropout的思想是训练整体DNN,并平均整个集合的结果,而不是训练单个DNN。DNNs是以概率P舍弃部分神经元,其它神经元以概率q=1-p被保留,舍去的神经元的输出都被设置为零。在训练阶段阻止神经元的共适应。

图片.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 承接前面的《浅谈机器学习基础》、《浅谈深度学习基础》和《浅谈自然语言处理基础》,主要参考了《解析深度学习:语音识别...
    我偏笑_NSNirvana阅读 23,853评论 6 66
  • 时间序列 金融 Deeptrader: Deep Learning in Finance (Auto-encod...
    hzyido阅读 2,833评论 0 0
  • 带来感动的 总是那些在角落里的人 他们像 有着无穷无尽的巨大力量 你需要阳光 他们便给你阳光 你需要信仰 他们便给...
    三遂阅读 1,846评论 0 3
  • Console.readkey():监听键盘事件,可以理解为按任意键执行。Console.read():读取键盘输...
    浮生岁月阅读 5,503评论 0 0
  • 时隔多日,再次想起这件疯狂而难忘的事,心中还是难免感动。 我与韩先生的相识有些狗血,那是在大一寒假...
    果味茶香溢阅读 4,685评论 3 3

友情链接更多精彩内容