题目标题

请问 GBDT 和 XGBoost 的区别是什么

难度:初级

机器学习
参考解析

XGBoost 类似于 GBDT 的优化版,不论是精度还是效率上都有了提升。与
GBDT 相比,具体的优点有:
1.损失函数是用泰勒展式二项逼近,而不是像 GBDT 里的就是一阶导数;
2.对树的结构进行了正则化约束,防止模型过度复杂,降低了过拟合的可能
性;
3.节点分裂的方式不同,GBDT 是用的基尼系数,XGBoost 是经过优化推导后