inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

모델링 및 평가(분류)

test_data로 평가할 때 pred 행 개수와 test 행개수 틀림

해결된 질문

347

호로롤로

작성한 질문수 2

1

동영상: 26:30

안녕하세요

trainset에서 tr, val 분류한 후 모델 설정 후 testset으로 roc_auc_score 평가를 하려고 함수를 적용했는데요

pred의 행의 수와 test_set 행의 수가 다르다는 오류가 떠서요.

선생님께서는 roc 평가를 할때 X_test[cols] 데이터와 X_val을 사용한 예측결과인 pred[:1]을 사용하셨는데 저는 그럼 행의 수가 다르다는 오류가 뜨네요ㅠㅠㅠ

# XGBoost

from xgboost import XGBClassifier

xgb = XGBClassifier()
xgb_fit = xgb.fit(X_tr[cols],y_tr)
xgb_pred = xgb.predict_proba(X_val[cols])

from sklearn.metrics import roc_auc_score
roc_auc_score(y_val,xgb_pred[:,1])
# 평가 데이터로 예측 및 csv파일 생성

summit = pd.DataFrame({
    "id" : X_test['id'],
    "income" : xgb_pred[:,1]
})

summit.to_csv("1111.csv",index=False)

##############위 코드 작성으로 생긱 오류부분################
ValueError: array length 2931 does not match index length 3257

 

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

처음 작업형2를 할 때 흔히 하는 실수입니다:)

train에서 분리해서 만든 val 는 검증용일 뿐입니다. 제출용이 아닙니다.

제출용은 test 파일입니다.

아래 에러는 X_test의 길이와 xgb_pred의 길이가 다르기 때문이에요 xgb_pred는 테스트를 예측한 것이 아니라 val을 예측했네요!

summit = pd.DataFrame({
    "id" : X_test['id'],
    "income" : xgb_pred[:,1]
})

#ValueError: array length 2931 does not match index length 3257

출력값 질문

0

12

1

수업노트가 어디에 있나요?

0

21

1

실기시험 제출관련

0

154

2

6.20 작업형 2 과적합

0

158

3

코딩팡 장업형2 베이스 라인 인코딩 종류 질문

0

50

2

로지스틱회귀, 회귀

0

48

2

회귀 문제를 풀때 질문입니다.

0

56

1

불균형 처리 후 성능이 더 낮아졌다면,

0

62

2

실기 체험 제2유형 에러 문의

0

61

1

LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요

0

50

2

3번문제 등분산 가정

0

48

2

작업형3 target 형 변환 질문

0

35

2

[작업형1] 연습문제 섹션1 ~ 10 의 section4

0

36

3

원핫인코딩과 레이블 인코딩에서 concat

0

59

2

제2유형 질문입니다.

0

46

2

C()

0

44

2

작업형 2에서 strafity 적용 유무

0

52

2

수강 기간 연장 가능 여부 문의드립니다.

0

61

1

ols

0

43

2

2유형 작성관련 질문(일반 심화)

0

39

2

2유형 작성관련 질문

0

41

2

2유형 object컬럼 개수 다르면

0

48

2

코딩팡질문이요ㅠㅠ

0

45

2

관찰값과 기대값의 개념이 헷갈립니다.

0

25

2