lightgbm 예측값 오류?

Question

학습 관련 질문을 남겨주세요. 상세히 작성하면 더 좋아요! 질문과 관련된 영상 위치를 알려주면 더 빠르게 답변할 수 있어요 먼저 유사한 질문이 있었는지 검색해보세요 이번 시험에서 작업형2 문제 풀이 과정입니다 Test 데이터에 총 3개의 범주형 컬럼이 존재 하였습니다. 월, 요일, 네임 이때 각 고유값은 12,7,2 여서 따라서 월과 요일은 라벨인코딩 / 네임은 겟더미즈 로 각각 하였습니다. 이후 모델 성능을 비교파기 위해 랜덤포레스트와 라이트지비엠을 사용 하였습니다. 랜포리그레서로 학습시키고 예측할 땐 random_state 만 고정한채 mae로 평가하였더니 140 정도였고 XGBM리그레서로 학습시키고 mae로 평가하니 108 정도 나왔습니다. 이때도 딱히 하이퍼 파마미터튜닝은 진행하지 않았습니다. 따라서 test 데이터를 xgbmregressor에 적용하여 예측한 결과를 제출하였습니다. 다만 여기서 lightgbm 을 사용하신 분들이 랜덤포레스트에서는 없었던 음수값이 예측에 나왔다고 하는데, 전처리를 동일하게 하고 평가도 좋게나온 모델의 결과가 저렇게 오류로 나올 수가 있나요..?그냥 남들 다 쓰는 랜포 쓸걸 괜히 lightgbm 알아서 쓴거 같다는 기분이 듭니다 ㅜㅜ

퇴근후딴짓 · Answer

mae 계산법은 음수라고 해서 패털티를 더 주는 것이 아니에요~ 실제값에서 +10도 10차이고 실제값에서 -10도 10차이 입니다. 똑같이 계산해요~ ! 그리고 그 결과를 평균으로 계산합니다. mae가 낮은 것을 선택하는 것이 맞아요! 큰 문제 없으리라 생각됩니다. 너무 걱정마세요. 고생많으셨습니다.

wanzy123 · Answer

lightgbm으로 예측한 결과 값이 음수였고, randomforest는 음수가 없었다고 합니다.. 그분들은 저와 다른 전처리를 하셨겠지만 저같은 처리한 경우에도 lightgbm만 오류를 낼 수 있나요..? read_csv로 출력했을 땐 ...으로 가려져서 전부 다 확인을 못했습니다. 보여지는 부분은 다 양수값이었구요 ㅜ