TensorFlow知识点备忘2(拟合问题)

本文介绍了在TensorFlow中防止过拟合的各种方法,包括理解模型容量、数据集划分、提前停止训练、正则化、滑动平均模型、Dropout以及数据集增强。这些技术有助于提高深度学习模型的泛化能力。
摘要由CSDN通过智能技术生成

PS:本人初学,技术菜的抠脚,本博客仅对学习过程中遇到的知识点进行总结,如有错误,还望指出,谢谢。

1、模型容量

模型的容量或表达能力,是指模型拟合复杂函数的能力。

数据拟合所采用的多项式次数越多,多项式就能更好的反映与数据之间的关系,但过多的次数会造成过度拟合,以及过多消耗计算资源,所以选择合理的模型,最大程度的增加模型表达的泛化能力,是非常重要的一件事。
在这里插入图片描述

2、过拟合问题

当模型容量过大时,可能会出现在训练集上表现良好,但测试集上表现较差的情况,这是由于训练模型还将额外的观测误差(噪声?)学习了进来,导致最终的模型泛化能力较差,这种情况就叫做“过拟合(overfitting)”,相对应的,如果模型容量过小,则会造成“欠拟合(underfitting)”只有训练的模型和真实模型容量大致匹配时,模型才具有较好的泛化能力。

在这里插入图片描述

现代深度神经网络中过拟合现象非常容易出现&#

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值