uniform blending: 每人一票,或者是求平均的方式
weighted,根据模型在验证集上的表现(adaboost里就用到了)。
linear blending: 用五分之四的数据做训练,然后对五分之一的数据进行预测,预测结果做为特征,也就是对剩下的五分之一数据做非线性变换,然后交叉,获得所有数据的变换后特征,第二层用一个线性模型把这些特征组合起来进行预测。
any blending: 也叫stacking,同样和linear blending一致,也是two level learning的方法。和linear blending的区别在于第二层不使用线性模型,而是采用非线性的模型。
bagging:bootstrapping + uniform blending的组合操作称为bagging。
模型融合
最后编辑于 :
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
- 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
推荐阅读更多精彩内容
- 原文首发于https://tianle.me/2018/02/11/aggregate/,更好的阅读体验,公式显示...
- 1研发背景 互联网时代也是信息爆炸的时代,内容太多,而用户的时间太少,如何选择成了难题。电商平台里的商品、媒体网站...
- 对于机器学习和深度学习来说,用单模型的效果往往都没有进行模型融合后的效果好。 对模型来说,我们需要选择具有多样性,...
- #我的新知#1、肌肉运动锻炼最好的方式是:有氧运动—抗阻运动—拉伸运动相结合。运动后要拉伸。运动产生的肌肉不仅能让...