• 카테고리

    질문 & 답변
  • 세부 분야

    딥러닝 · 머신러닝

  • 해결 여부

    미해결

타이타닉 예제에서 kfold 관해 질문있습니다

21.06.24 14:26 작성 조회수 103

0

안녕하세요! 

타이타닉 예제에서 kfold 교차검증을 수행할때 전체 데이터를 가지고 train/test 데이터를 나누어 성능을 평가하셨는데 교차검증은 train 데이터 내부에서 이루어지는거 아닌가요? 

train_test_split으로 나눠진 train 데이터를 가지고  그 안에서 다시 교차검증을 위한 train/test를 나누어야한다고 이해했는데 데이터 부족으로 인해 이렇게 적용하신건지 궁금합니다!

뒤의 GridSearchCV에서는 train_test_split으로 나눠진 train 데이터를 fit하고 테스트 데이터에서 정확도가 87.15%로 향상되었다고 하는데 앞의 kfold는 교차검증정확도만 존재하고 예측여부를 확인할 test세트가 존재하지 않았으니 비교할 수 없지 않나...? 하는 의문이 생겨 질문 남깁니다.

항상 좋은 강의 감사합니다:)

답변 1

답변을 작성해보세요.

0

안녕하십니까,

네, 데이터가 여유가 없고 전체 데이터로 교차검증을 했습니다.

교차검증을 어떻게 적용하는지만 말씀 드리기 위해서 그리 적용했습니다.

원론적으로는 학습 데이터에서 교차 검증, 테스트 데이터에서 최종 검증이 맞습니다.

한가지 첨부드리고 싶은 것은, 여기서는 테스트 데이터도 크지 않기 때문에, 이 테스트 데이터로 최종 성능이 좋다고 반드시 성능이 좋다고 볼수는 없습니다. 테스트 데이터에 여유가 없을 때는 교차 검증만으로도 충분히 모델 성능 검증이 가능합니다. 

감사합니다.