热线电话：13121318867

登录
首页大数据时代如何理解欠拟合？常用的处理方法有哪些？
如何理解欠拟合？常用的处理方法有哪些？
2020-07-08
收藏

一、欠拟合概念及理解

机器学习中欠拟合是一个常见的问题，简单来说就是模型在训练和预测时表现都欠佳的情况。一个欠拟合的机器学习模型不是一个良好的模型并且在训练数据上表现不好这是显而易见的。

图中左边的表示size与prize关系的数据，中间的是出现欠拟合的模型，可以看出模型不能够很好地拟合数据，但如果将一个二次项添加到此模型的后面，就可以很好地拟合图中的数据了，就会有右侧的效果。

欠拟合问题，根本的原因是特征维度过少，导致拟合的函数无法满足训练集，误差较大。

二、常用的解决欠拟合问题的方法：

1.模型复杂化

对同一个算法复杂化。例如回归模型添加更多的高次项，增加决策树的深度，增加神经网络的隐藏层数和隐藏单元数等

弃用原来的算法，使用一个更加复杂的算法或模型。例如用神经网络来替代线性回归，用随机森林来代替决策树等

2.增加更多的特征，使输入数据具有更强的表达能力

特征挖掘十分重要，质量高的强表达能力的特征，抵得过大量弱表达能力的特征。但是挖掘强特，还必须对数据本身以及具体应用场景的深刻理解，这需要依赖于过往经验。

3.调整参数和超参数

超参数包括：

神经网络中：学习率、学习衰减率、隐藏层数、隐藏层的单元数、Adam优化算法中的β1β1和β2β2参数、batch_size数值等

其他算法中：随机森林的树数量，k-means中的cluster数，正则化参数λλ等

4.降低正则化约束

正则化约束是为了防止模型出现过拟合，现在模型的情况是欠拟合了，就需要降低正则化参数λλ或者直接去除正则化项


CDA数据分析师考试相关入口一览（建议收藏）：

▷ 想报名CDA认证考试，点击>>>   “CDA报名” 了解CDA考试详情；

▷ 想学习CDA考试教材，点击>>> “CDA教材” 了解CDA考试详情；

▷ 想加入CDA考试题库，点击>>> “CDA题库” 了解CDA考试详情；

▷ 想了解CDA考试含金量，点击>>> “CDA含金量” 了解CDA考试详情；

欠拟合 特征 神经网络 随机森林 决策树 机器学习 过拟合 线性回归

数据分析咨询请扫描二维码

若不方便扫码，搜微信号：CDAshujufenxi

上一篇Kmeans均值聚类算法的基本原理是什么？
下一篇过拟合(over-fitting)出现的原因及相应的解决方法
CDA考试动态
CDA报考指南
热门栏目
最新资讯
更多
Copyright © 2015-present 北京国富如荷网络科技有限公司 All Rights Reserved.
京ICP备11001960号-9   京公网安备 11010802034615号   经营许可证编号：京B2-20210330
客服在线
立即咨询