Ensemble ์์๋ธ ์ฌ๋ฌ ๊ฐ์ ๋จธ์ ๋ฌ๋ model์ ์ฐ๊ฒฐํ์ฌ ๊ฐ๋ ฅํ model์ ๋ง๋๋ ๊ธฐ๋ฒ classifier/regression์ ์ ๋ถ ํจ๊ณผ์ random forest์ gradient boosting์ ๋๋ค model์ ๊ตฌ์ฑํ๋ ๊ธฐ๋ณธ ์์๋ก decision tree๋ฅผ ์ฌ์ฉํ๋ค random forest ์กฐ๊ธ์ฉ ๋ค ๋ค๋ฅธ ์ฌ๋ฌ decision tree์ ๋ฌถ์ ๋๋ค ํฌ๋ ์คํธ์ ๋ฑ์ฅ ๋ฐฐ๊ฒฝ : ๊ฐ๊ฐ์ tree๋ ๋น๊ต์ ์์ธก์ ์ ํ ์ ์์ง๋ง, ๋ฐ์ดํฐ์ ์ผ๋ถ์ overfittingํ๋ ๊ฒฝํฅ์ ๊ฐ์ง ๋ฐ๋ผ์, ์ ์๋ํ์ง๋ง ์๋ก ๋ค๋ฅธ ๋ฐฉํฅ์ผ๋ก overfitting๋ tree๋ฅผ ๋ง์ด ๋ง๋ค๊ณ ๊ทธ ๊ฒฐ๊ณผ๋ฅผ ํ๊ท ๋ด๋ฉด overfitting์ ์ค์ผ ์ ์๋ค ์ด๋ ๊ฒ ํ๋ฉด tree model์ ์์ธก ์ฑ๋ฅ์ ์ ์งํ๋ overf..