random forest의 feature selection

Question

선생님, 열심히 공부하고 있는 학생입니다~!!  random forest의 특징이 randomly feature selection에 있다고 하는데요, feature selection이 된 후에 의사결정나무를 학습을 하는건가요? 아니면, 의사결정나무에서 규칙노드를 만드는 기준을 세울때 feature selection된 피쳐에 한정해서 split을 하는건가요?  이해가 잘 안되실거 같아서 그림으로 표현하였습니다. 둘중에 어떤 것인지 궁금합니다.  그림) feature selection이 된 후에 의사결정나무를 학습 하는 경우 [사진] 그림) 의사결정나무에서 규칙노드를 만드는 기준을 세울때 feature selection된 피쳐에 한정 [사진]  항상 친절히 답변주셔서 감사합니당!!

Answer

Random Forest는 일단 무작위로 feature들을 선택한 후에 선택된 feature만으로 최적의 Tree를 만듭니다.

이러한 과정을 반복해서 여러개의 Tree를 만들고 이들 Tree들을 대상으로 ensemble learning을 수행합니다.

감사합니다.

가물치

random forest의 feature selection

이 글과 비슷한 Q&A

랜덤포레스트와 xgb

5-1 작업형2 모의문제1 강의 내용 질문

df.drop 사용시 에러 발생

주어진 csv파일이 2개일때와 3개일때 차이가 궁금합니다