inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

y_test

해결된 질문

281

sychang2000

작성한 질문수 15

1

# 데이터 및 라이브러리 로드하기 
import pandas as pd

train = pd.read_csv('/content/train.csv')
test = pd.read_csv('/content/test.csv')

Train = train.copy()
X_train = Train.drop(['Attrition_Flag','CLIENTNUM'],axis=1)
y_train = Train['Attrition_Flag']
X_test = test.copy()
X_test_CL = X_test.pop('CLIENTNUM')
# print(X_train.head())
# print(y_train.head())
# print(X_test.head())

# EDA

# print(X_train.shape, X_test.shape, y_train.shape)

# print(X_train.isnull().sum())
# print(X_test.isnull().sum())

# print(X_train.describe())
# print(X_test.describe())
# print(X_train.describe(include = object))
# print(X_test.describe(include = object))

# print(y_train.value_counts())

# 데이터 전처리 - 결측치 없음, 이상치 없음

# 피처 엔지니어링
cols1 = list(X_train.columns[X_train.dtypes == object]) # 범주형
cols2 = list(X_train.columns[X_train.dtypes != object]) # 수치형
# print(cols2, X_train.info())

Xc_train = X_train[cols1] # 범주형
Xc_test = X_test[cols1]
Xn_train = X_train[cols2] # 수치형
Xn_test = X_test[cols2]

Xc_train = pd.get_dummies(X_train[cols1]) # 범주형 데이터 원핫인코딩
Xc_test = pd.get_dummies(X_test[cols1])

from sklearn.preprocessing import RobustScaler
Ro = RobustScaler()
X_train[cols2] = Ro.fit_transform(X_train[cols2])
X_test[cols2] = Ro.transform(X_test[cols2])

Xn_train = X_train[cols2] # 수치형
Xn_test = X_test[cols2]

X_train = pd.concat([Xc_train, Xn_train], axis = 1)
X_test= pd.concat([Xc_test, Xn_test], axis = 1)

# print(X_train.head())
# print(X_test.head())

# 데이터 분리
from sklearn.model_selection import train_test_split

X_tr, X_val, y_tr, y_val = train_test_split(X_train, y_train, test_size = 0.15, random_state=2023)
# print(X_tr.shape, X_val.shape, y_tr.shape, y_val.shape)

# 모델링
import lightgbm as lgb
lg = lgb.LGBMClassifier(random_state=2023)
lg.fit(X_tr, y_tr)
predict = lg.predict(X_val)
predictproba = lg.predict_proba(X_val)

# 평가 및 제출
# ROC-AUC, 정확도(Accuracy), F1, 정밀도(Precision), 재현율(Recall)
from sklearn.metrics import roc_auc_score, accuracy_score, f1_score, precision_score, recall_score

# print(roc_auc_score(y_val, predictproba[:,1]))
# print(accuracy_score(y_val, predict))
# print(f1_score(y_val, predict))
# print(precision_score(y_val, predict))
# print(recall_score(y_val, predict))

predictproba_final = lg.predict_proba(X_test)

submit = pd.DataFrame(
    {
        'CLIENTNUM':X_test_CL,
        'Attrition_Flag':predictproba_final[:,1]
    }
)

# submit.head()

submit.to_csv('1.csv', index = False)

# 제출 제대로 했나 확인
pd.read_csv('1.csv')

#
y_test = pd.read_csv('/content/y_test.csv')
print(roc_auc_score(y_test, predictproba_final[:,1]))

print(roc_auc_score(y_test, predictproba_final[:,1]))만 되고 print(roc_auc_score(y_test, predictproba[:,1]))는 안되는게 정상인가요?

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

1

퇴근후딴짓

네 맞습니다.Xval은 yval로 평가를 비교해야 합니다 ;)

print(roc_auc_score(y_val, predictproba[:,1]))

시험에서는 ytest값은 제공하지 않으니 착오없으시길 바래요 💪💪

 

수강 연장 문의드립니다.

0

10

1

강의 연장 문의

0

19

1

수강 신청 연장 문의드립니다.

0

28

1

작업형 1번문제... 환경관련

0

26

2

12회 기출은 언제 업데이트 될까요??

0

36

2

8/6 작성한 연장문의 질문글에 대한 재요청

0

38

2

수강기간 연장 문의

0

37

2

수강기간 연장문의

0

36

2

수강기간 연장 요청 문의드립니다

0

38

2

수강 기간 연장 문의

0

46

2

수강연장 가능 문의 (기간 약 한달반)

0

58

2

수강기간 연장 가능할까요 선생님

0

74

2

Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.

0

55

3

수강연장요청 문의

0

89

2

아무래도 다음 시험 연장은 어렵겠죠?

0

107

2

빅분기 12회 결과 관련 문의

0

112

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

80

2

수강연장 문의

0

104

2

재검토 요청 방법 좀 알려주셔요...-.-;;

0

105

2

12회 실기 질문(작업형 2)

0

91

2

뒤로가기 버튼 같은 것이 있나요?

0

66

1

강의 연장 문의

0

99

2

출력값 질문

0

71

2

수업노트가 어디에 있나요?

0

63

1