inflearn logo
강의

Course

Instructor

[Side Project After Work] Big Data Analysis Certification Practical Exam (Type 1, 2, 3)

Evaluation Metrics (Binary/Multi-class Classification, Regression)

f1 score 질문

Resolved

39

rosana8831

11 asked

0

인코딩을하면 f1 score에서 pos_label을 따로 지정할 필요가 없나요??

그리고 평가하는 게 모의시험 느낌이라고 말씀하셨는데,

pred = model.predict(X_val) or

pred_proba = model.predict_proba(X_val)

로 한 다음에,
pred = model.predict(test) or

pred = model.predict_proba(test)로 제출하면 될까요?

python 머신러닝 빅데이터 pandas 빅데이터분석기사

Answer 2

0

roadmap

네 맞습니다 그런데 인코딩을 하면 예를들어

from sklearn.preprocessing import LabelEncoder

le = LabelEncoder()
y_train_encoded = le.fit_transform(y_train)  # 'no' → 0, 'yes' → 1


으로 하면됩니다.


인코딩했을 때 1이 문제에서 찾고자 하는 값이 맞는지 분명한지 체크가 필요해요

print(le.classes_)# ['no' 'yes']


다만 이 경우 실수할 가능성이 있어요 왜냐면

예측 이후 결과과 yes, no가 아니라 1과 0이기 때문에

다시 원복(yes, no)을 해야 하는데 실수할 여지가 커 리스크가 있어요!


코딩이 익숙하면 몰라도 아니라면

타겟을 인코딩하는 방식은 추천하지 않아요 잘못하다간 0과 1로 제출하는 순간 0점이 되버립니다.


0

communityai8509

안녕하세요, 인프런 AI 인턴입니다. rosana8831님.

질문 주신 내용에 대해서 정리하여 답변드리겠습니다.

1. f1_score와 pos_label

  • f1_score에서 pos_label: 일반적으로 인코딩을 통해 모든 클래스가 0과 1로 변경된 경우, pos_label을 따로 지정할 필요가 없습니다. f1_score에서는 기본적으로 1을 양성 클래스(positive class)로 간주하기 때문입니다. 그렇지만, 데이터가 문자(예: ‘>50K’ 등)로 레이블링 되어 있을 경우 pos_label을 명시적으로 지정해야 합니다. 예를 들어, ‘f1_score(y_true, y_pred, pos_label=‘positive_value’)‘와 같이 사용합니다.

2. Predict or Predict_proba

  • 분류 문제: 결과가 0 또는 1로 필요하다면 model.predict()를 사용하고, 확률로 제공되어야 한다면 model.predict_proba()를 사용합니다. 예를 들어, f1-score를 사용하여 평가하는 문제에서는 보통 predict를 사용합니다.
  • roc-auc와 같은 평가지표에는 predict_proba()로 출력된 확률 값이 필요합니다. 따라서 문제의 평가 기준에 따라 적절한 메소드를 선택해야 합니다.

3. 시험 응시에 대한 조언

  • 예측 단계: 모델로 예측할 때는 X_val 데이터셋에 대해 검증(prediction)하고, 최종 예측(test)에서 사용하는 방법이 동일해야 합니다. 이를 통해 과적합을 줄이고 모델의 일반화 능력을 보장할 수 있습니다.

이 외에도 이전에 올라온 유사한 질문도 참고하면 도움이 될 것입니다:

지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드렸습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

아무래도 다음 시험 연장은 어렵겠죠?

0

42

1

빅분기 12회 결과 관련 문의

0

73

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

63

2

수강연장 문의

0

61

1

재검토 요청 방법 좀 알려주셔요...-.-;;

0

91

2

12회 실기 질문(작업형 2)

0

76

2

뒤로가기 버튼 같은 것이 있나요?

0

53

1

강의 연장 문의

0

77

2

출력값 질문

0

54

2

수업노트가 어디에 있나요?

0

49

1

실기시험 제출관련

0

209

3

6.20 작업형 2 과적합

0

207

3

코딩팡 장업형2 베이스 라인 인코딩 종류 질문

0

68

2

로지스틱회귀, 회귀

0

59

2

회귀 문제를 풀때 질문입니다.

0

66

1

불균형 처리 후 성능이 더 낮아졌다면,

0

74

2

실기 체험 제2유형 에러 문의

0

74

1

LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요

0

64

2

3번문제 등분산 가정

0

58

2

작업형3 target 형 변환 질문

0

45

2

[작업형1] 연습문제 섹션1 ~ 10 의 section4

0

65

3

원핫인코딩과 레이블 인코딩에서 concat

0

69

2

제2유형 질문입니다.

0

58

2

C()

0

52

2