inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

모델링 및 평가(분류)

test_data로 평가할 때 pred 행 개수와 test 행개수 틀림

해결된 질문

347

호로롤로

작성한 질문수 2

1

동영상: 26:30

안녕하세요

trainset에서 tr, val 분류한 후 모델 설정 후 testset으로 roc_auc_score 평가를 하려고 함수를 적용했는데요

pred의 행의 수와 test_set 행의 수가 다르다는 오류가 떠서요.

선생님께서는 roc 평가를 할때 X_test[cols] 데이터와 X_val을 사용한 예측결과인 pred[:1]을 사용하셨는데 저는 그럼 행의 수가 다르다는 오류가 뜨네요ㅠㅠㅠ

# XGBoost

from xgboost import XGBClassifier

xgb = XGBClassifier()
xgb_fit = xgb.fit(X_tr[cols],y_tr)
xgb_pred = xgb.predict_proba(X_val[cols])

from sklearn.metrics import roc_auc_score
roc_auc_score(y_val,xgb_pred[:,1])
# 평가 데이터로 예측 및 csv파일 생성

summit = pd.DataFrame({
    "id" : X_test['id'],
    "income" : xgb_pred[:,1]
})

summit.to_csv("1111.csv",index=False)

##############위 코드 작성으로 생긱 오류부분################
ValueError: array length 2931 does not match index length 3257

 

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

처음 작업형2를 할 때 흔히 하는 실수입니다:)

train에서 분리해서 만든 val 는 검증용일 뿐입니다. 제출용이 아닙니다.

제출용은 test 파일입니다.

아래 에러는 X_test의 길이와 xgb_pred의 길이가 다르기 때문이에요 xgb_pred는 테스트를 예측한 것이 아니라 val을 예측했네요!

summit = pd.DataFrame({
    "id" : X_test['id'],
    "income" : xgb_pred[:,1]
})

#ValueError: array length 2931 does not match index length 3257

추가질문 합니다

0

1

1

시험환경 구름

0

3

1

2유형 질문드려요

0

4

1

RandomForest vs lgb

0

15

1

전처리 관련질문

0

9

2

작업형3 기출

0

9

1

유형2에서 데이터분할 생략 가능여부

0

17

2

9회 기출 유형3 질문

0

12

1

lgb 기초편

0

8

1

괄호 사용

0

12

1

작업형 2 데이터 전처리 질문

0

16

1

11회 기출 유형 작업형1 문제 3-1

0

11

0

예시문제 작업형2 (ver2023) 질문입니다

0

14

1

Data type에 따른 처리

0

12

2

데이터 전처리 관련

0

14

2

시험에서 문제 불러오기

0

14

2

2번문제 출력값 질문

0

18

2

pd.get_dummies()가 bool로 반환

0

16

2

대응표본검정 레빈

0

20

3

단일표본검정 문제 유형

0

22

2

[작업형 3] 6~7. 카이제곱 검정

0

18

2

9회 작업형3 문제 1-1

0

36

2

최종답안 계산 방식 질문

0

23

1

시험 치기 전 급하게 질문 사항

0

38

2