标签： #集成学习

从随机森林无法继续降低共同偏差出发，手算两轮残差拟合，推导负梯度与逐步加法模型，并实现可诊断的梯度提升回归。

从单棵树的高方差出发，手算自助采样、概率平均与袋外预测，解释特征子采样如何降低相关性，并实现可诊断的 sklearn 随机森林。