정확도 / 정밀도 높이는 방법 문의

Question

안녕하세요 강사님! 저는 2년전에, 강사님 강의를 듣고(Advanced kaggle 도 수강) 사내 해커톤 경진대회에서 대상을 수상하였던 수강생입니다. 이번에도 해커톤을 나가게 되었는데 정확도 / 정밀도 모두 심사기준입니다. 혹시 이 둘을 같이 높일 수 있는 방법이 있다거나 기타 다른 팁이 혹시 있을까요..? 감사합니다.

권 철민 · Answer

안녕하십니까, 오, 대상까지 수상하시고, 대단하십니다. 저도 기쁘군요. 정확도와 정밀도를 한꺼번에 높이는 방법에 대한 질문은 동일한 피처 엔지니어링을 적용하더라도 모델 평가시 정확도와 정밀도 측면에서 높아질 수 있는 모델학습이나 하이퍼 파라미터 튜닝을 질문하신것 같은데, 이 방법은 저도 잘 모르겠습니다. 근데, (잘 아시겠지만) 지금 이걸 고민하실 필요는 없지 않을까 싶습니다(아마 경연이다보니, 최종일 몇일 안남기고 쥐여 짤(?) 튜닝을 생각하시고 질문하신것 같습니다만). 일단 최선으로 피처 엔지니어링과 하이퍼 파라미터 튜닝을 먼저 잘 해놓으신 Base model을 만드시는게 먼저 일것 같습니다. 다음으로는 학습시 정확도/정밀도 측면에서 평가를 하면서(boosting 계열 학습 시 validation 평가를 정확도로) 학습 된 여러가지 모델(예를 들어 lightgbm, xgboost) 들을 ensemble/stacking을 적용해 보시면 좋을 것 같습니다. 감사합니다.