2일차 종합실습 모델 평가 MAPE 지표

Question

안녕하세요. 강의 잘 듣고 있습니다. 종합실습에서 모델을 만들고 돌린 후에 모델 평가 코드를 실행했습니다. 다른 지표는 이전 실습(강의)에서 했던 것과 비슷하게 나왔습니다. 하지만 MAPE 지표는 엄청 큰 값이 나왔습니다. 예) MAPE : 352267848908800.0 혹시 몰라서 참조답안 코드도 전체 실행하고 MAPE 지표를 확인했고 마찬가지로 ( MAPE : 380158091460608.0 ) 엄청 큰 값이 나왔습니다. 왜 이렇게 큰 값이 나온 걸까요? chat한테 물어보니까 다음과 같은 답변을 받았습니다. MAPE 값이 매우 큰 것은 비정상적입니다. 일반적으로 MAPE는 100% 미만의 값을 가집니다. 이렇게 큰 MAPE 값은 다음과 같은 이유로 발생할 수 있습니다: 실제값 중 0 또는 0에 매우 가까운 값이 있어 분모가 극히 작아진 경우 데이터 스케일링 문제로 인해 예측값과 실제값의 차이가 극단적으로 큰 경우 계산 과정에서의 오류 이러한 MAPE 값은 신뢰할 수 없으며, 데이터나 모델에 문제가 있을 가능성이 높습니다. MSE와 MAE는 상대적으로 합리적인 값을 보이고 있으므로, MAPE 계산 과정이나 데이터를 재검토해볼 필요가 있습니다.

한기영 · Answer

안녕하세요? 질문에 답변 드립니다.^^ MAPE는 실제값 - 예측값을 실제값으로 나눈 후, 이의 절대값 평균으로 계산합니다. 이때 나누는 수인 실제값이 0인 경우 분모가 0이 되는 문제가 발생하므로 계산상 오류를 방지하기 위해 분모에 아주 작은 수를 더해줍니다. 보통 1*e-06 정도의 수 입니다. 그런 경우에 MAPE가 엄청 큰 수가 나오게 됩니다. 이럴 때에 MAPE 지표를 사용하지 않는답니다. 답변이 되셨기를 바랍니다.^^