07.过拟合问题

过拟合问题

龙格现象,预测出的函数值过于复杂,以此去匹配每一个函数值和函数对象,导致过拟合
没有达到很好的预测效果,无法泛化到新的样本中

回归方程中

在训练集中过拟合的话,在测试集中的准确率往往不会高,就是预测能力不强,有偏差

解决过拟合问题的方法

  1. 减少选取变量的选择,减少特征变量
  2. 正则化:保留特征变量,减少参数

正则化

通过添加平衡值让参数减小,降低输入值的影响,手动调节参数,预测到过拟合,减小模型的学习能力
如何选择正则化参数很重要,可以减小参数值的变化程度

线性回归的正则化

把多次项的数值减小甚至为0,因为过拟合的大多数都来自与多次数的项

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐