inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업형2 모의문제3

작업형2 모의문제 3

해결된 질문

277

이명주

작성한 질문수 15

0

test와 train데이터가 아닌,

X_test, X_train, y_test, y_train으로 할 때에 검증데이터와 훈련데이터를 어떻게 나누는지가 헷갈립니다ㅠㅠ

훈련값에 id를 포함하지 않고, 타겟값에 y_train을 전체 넣는 건지, 혹은 타겟값에 y_train 중 'output'만 넣어야하는지 궁금합니다..!!!

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

  1. id가 숫자라면 포함해도 되고 제거해도 됩니다. 포함하더라도 모든 id값이 다르므로 변수(피처)의 중요도를 모델이 낮게 생각해요
    2. 검증데이터를 분리할 때

    • 타겟을 제외한 데이터 train.drop('output', axis=1)

    • 타겟 데이터 train['output']

    를 넣어주면 됩니다.

     

     

    X_tr, X_val, y_tr, y_val = train_test_split(train.drop('output', axis=1), train['output'])

 

코드가 길어서 복잡해 보인다면 아래와 같이 작성할 수도 있어요

X = train.drop('output', axis=1)
y = train['output']

X_tr, X_val, y_tr, y_val = train_test_split(X, y)

 

 

0

이명주

답변 감사합니다!! 그럼 훈련값, 타켓값 모두 id가 포함되어 있어도 상관없는건가요!!?

1

퇴근후딴짓

Train과 test에는 id가 함께 있거나 함께 없거나 하면되고

Target에는 다른값이 있으면 안됩니다 target컬럼만 있어야해요 👏

0

이명주

X_train = X_train.drop('id',axis = 1)

y_train_id = y_train.pop('id')

 

from sklearn.model_selection import train_test_split

X_tr,X_val,y_tr,y_val = train_test_split(X_train,y_train,test_size = 0.2,random_state=2022)

 

from sklearn.ensemble import RandomForestClassifier

model = RandomForestClassifier()

model.fit(X_tr,y_tr)

pred = model.predict(X_val)

 

이렇게 코드를 적었는데 다음과 같은 오류가 떴습니다

<ipython-input-18-22d814881781>:3: DataConversionWarning: A column-vector y was passed when a 1d array was expected. Please change the shape of y to (n_samples,), for example using ravel().

 

어떤 부분을 수정해야 하는지 알 수 있을까요? ㅠㅠㅠ

 

0

퇴근후딴짓

X_tr,X_val,y_tr,y_val = train_test_split(X_train,y_train,test_size = 0.2,random_state=2022)

y_train['타겟 컬럼'] 타겟 컬럼을 지정해주세요:)

수강 연장 문의드립니다.

0

8

1

강의 연장 문의

0

17

1

수강 신청 연장 문의드립니다.

0

28

1

작업형 1번문제... 환경관련

0

25

2

12회 기출은 언제 업데이트 될까요??

0

35

2

8/6 작성한 연장문의 질문글에 대한 재요청

0

38

2

수강기간 연장 문의

0

36

2

수강기간 연장문의

0

36

2

수강기간 연장 요청 문의드립니다

0

38

2

수강 기간 연장 문의

0

46

2

수강연장 가능 문의 (기간 약 한달반)

0

58

2

수강기간 연장 가능할까요 선생님

0

74

2

Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.

0

55

3

수강연장요청 문의

0

88

2

아무래도 다음 시험 연장은 어렵겠죠?

0

107

2

빅분기 12회 결과 관련 문의

0

112

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

80

2

수강연장 문의

0

104

2

재검토 요청 방법 좀 알려주셔요...-.-;;

0

105

2

12회 실기 질문(작업형 2)

0

91

2

뒤로가기 버튼 같은 것이 있나요?

0

66

1

강의 연장 문의

0

99

2

출력값 질문

0

71

2

수업노트가 어디에 있나요?

0

63

1