Machine Learning/Ensemble
2022. 10. 17.
Voting Ensemble & Weighted Average Ensemble
빅콘테스트 퓨처스 대회 준비 중 학습 모델로 Ensemble 모델을 사용하기로 결정했다. 대회 준비 중 Ensemble 공부했던 내용을 정리해 보고자 한다. 1. Voting Ensemble(투표 앙상블) Voting Ensemble이란, 성능을 향상시키기 위해 개별 모델들의 예측치(prediction)를 합치는 앙상블 기법이다. regression 문제인 경우, 투표 앙상블은 다수의 모델에서 산출된 예측치의 평균을 최종 예측치로 선정한다. Classification 문제인 경우, Hard Voting과 Soft Voting으로 나눌 수 있다. Hard Voting은 가장 많은 득표를 한 class를 최종 예측치로 선정하고 Soft Voting은 각 class별로 예측된 확률의 총합을 구해 가장 큰 값을..