【集成学习系列教程1】AdaBoost分类算法原理及sklearn应用

1 Boosting方法1.1 引言从小到大，我们的父母和老师经常教导我们，“团结就是力量”、“众人拾柴火焰高”，“三个臭皮匠，顶个诸葛亮”。小时候我们可能不能完全理解这些话的意思，但是随着年龄的增长，我们渐渐体会到了团队合作的重要性，也渐渐加深了对这些话的理解。非常幸运的是，有很多科学家参透了这些道理，并将它们应用到了机器学习领域。他们发现：将多个预测准确率不怎么高的基础机器学习模型结合成一个混合的模型，往往可以取得更高的准确率。他们将这些表现较差的基础机器学习模型称为“weak learner“（