XGBoost
Gradient Boosting을 빠르고 확장 가능하게 만든 XGBoost. 근사 split finding, sparsity-aware split, 그리고 시스템 설계 (column-wise pre-sorted) 까지.
Chaehyeon Lee
Gradient Boosting을 빠르고 확장 가능하게 만든 XGBoost. 근사 split finding, sparsity-aware split, 그리고 시스템 설계 (column-wise pre-sorted) 까지.
Bagging의 특수한 형태로, decision tree를 base learner로 쓰면서 분기 시 변수도 무작위로 선택해 다양성을 한층 확보하는 앙상블. 일반화 오차 공식과 OOB 기반 변수 중요도까지 정리.