About GOSS/EFB in LightGBM

머신 러닝 빠개기/Decision Tree

휴먼러닝 2020. 4. 14. 15:31

- LightGBM과 GBDT의 차이점

--> Light라는 말이 여기서 파생되어 나오지 않았나 생각함.. Feature와 Row의 수를 정보손실을 최소화하며(Light하게) 줄여주기 때문에?

--> 그러면 일반 GBDT 모델들은 (XGBoost) 해당 기능이 없다는 말이고.. One-Hot인코딩 같은걸 하면 일일이 분기하면서 내려가서 늦었던건가?

- GOSS : Gradient-based One-Side Sampling

- EFB : Exclusive Feature Bundling

What makes lightGBM lightning fast?

Understanding GOSS and EFB; The core pillars of lightGBM

towardsdatascience.com