inflearn logo
강의

Course

Instructor

[Side Projects After Work] Big Data Analysis Engineer Practical Exam (Task Types 1, 2, and 3)

Sample Problem Practical Task 2 (ver. 2023)

저는 원핫 인코딩으로 진행했는데 이런 코드로 짜보니 결국에는 마지막 에러가..

124

esh20194508

63 asked

0

결국엔 마지막 에러가 '주구매상품_소형가전'이라고 뜨네요

제 코드에서 어디를 수정해야할까요?

import pandas as pd

train = pd.read_csv("data/customer_train.csv")

test = pd.read_csv("data/customer_test.csv")

#분류문제(랜포RandomForestClassifier)

#print(train.shape),print(test.shape)

#결측치 이상치 확인

train['환불금액']=train['환불금액'].fillna(0)

test['환불금액']=test['환불금액'].fillna(0)

train=train.drop('회원ID',axis=1)

test=test.drop('회원ID',axis=1)

#타겟값 지정

target=train.pop('성별')

#원핫인코딩

train=pd.get_dummies(train)

test=pd.get_dummies(test)

#데이터분할하기

from sklearn.model_selection import train_test_split

X_tr, X_val, y_tr, y_val = train_test_split(train, target, test_size=0.2, random_state=2022)

# print(X_tr.shape, X_val.shape, y_tr.shape, y_val.shape)

#모델함수 불러와서 에측하기

from sklearn.ensemble import RandomForestClassifier

from sklearn.metrics import roc_auc_score

model=RandomForestClassifier(n_estimators=1000,max_depth=7,random_state=2022)

model.fit(X_tr, y_tr)

pred = model.predict_proba(X_val)

#성능평가 roc_auc

from sklearn.metrics import roc_auc_score

print(roc_auc_score(y_val,pred[:,1]))

#실제 test로 예측값구하기

pred = model.predict_proba(test)

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

Answer 2

0

roadmap

합쳐서 인코딩이 필요합니다. :)

0

esh20194508

챗gpt에 물어보니

train, test = train.align(test, join='left', axis=1, fill_value=0)

이 코드로 해결하라는데 이렇게 사용하면 추후에 어떤 문제가 있을까요

강의 속 설명에서 set으로 묶는건 복잡하고 이해가 잘 안되서요

0

roadmap

특이한 경우 이지만

test에는 있는데 train에는 없는 경우

컬럼을 삭제하는 문제가 있습니다. (매우 특이한 케이스로 사용해도 무방합니다.)

안녕하세요? 강사님 질문있습니다.(인코딩관련)

0

36

2

이진분류에서 양성 클래스가 0일 때 평가 방법

0

30

2

원핫인코딩 전 train과 test 병합여부

0

43

2

수강기간 연장

0

50

2

29강 작업2형의 이상치 처리

0

60

2

수강기간 연장 문의드립니다!

0

61

2

9월에 실기출제기준 개정내역에 신설된부분

0

54

1

작업형2 모의문제2 결과값 관련 문의드립니다.

0

65

2

12회차 시험 실패 후 13회 도전 예정입니다.

0

52

1

random_state 값

0

70

2

강의 연장 문의 드립니다.

0

64

2

강의 연장 문의

0

60

2

오징어게임

0

66

1

object 컬럼이 여러 개인 경우 인코딩 전처리 방법

1

49

2

데이터 전처리 순서 관련

0

62

2

작업형2 모의문제 데이터 불러오기

0

60

2

강의 연장 부탁드립니다!

0

66

2

수강기간 연장 문의드립니다!

0

62

2

2회 기출유형(작업형1) Warning

0

75

2

describe()

0

57

2

수강기간 연장 문의

0

83

2

빅데이터분석기사 실기 인코딩

0

71

2

수강기간 연장문의

0

81

2

수강 기간 연장 문의 드립니다.. 부탁드립니다 ㅠㅠ

0

67

2