inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업형2 모의문제3

작업형2 모의문제 3

해결된 질문

263

이명주

작성한 질문수 15

0

test와 train데이터가 아닌,

X_test, X_train, y_test, y_train으로 할 때에 검증데이터와 훈련데이터를 어떻게 나누는지가 헷갈립니다ㅠㅠ

훈련값에 id를 포함하지 않고, 타겟값에 y_train을 전체 넣는 건지, 혹은 타겟값에 y_train 중 'output'만 넣어야하는지 궁금합니다..!!!

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

  1. id가 숫자라면 포함해도 되고 제거해도 됩니다. 포함하더라도 모든 id값이 다르므로 변수(피처)의 중요도를 모델이 낮게 생각해요
    2. 검증데이터를 분리할 때

    • 타겟을 제외한 데이터 train.drop('output', axis=1)

    • 타겟 데이터 train['output']

    를 넣어주면 됩니다.

     

     

    X_tr, X_val, y_tr, y_val = train_test_split(train.drop('output', axis=1), train['output'])

 

코드가 길어서 복잡해 보인다면 아래와 같이 작성할 수도 있어요

X = train.drop('output', axis=1)
y = train['output']

X_tr, X_val, y_tr, y_val = train_test_split(X, y)

 

 

0

이명주

답변 감사합니다!! 그럼 훈련값, 타켓값 모두 id가 포함되어 있어도 상관없는건가요!!?

1

퇴근후딴짓

Train과 test에는 id가 함께 있거나 함께 없거나 하면되고

Target에는 다른값이 있으면 안됩니다 target컬럼만 있어야해요 👏

0

이명주

X_train = X_train.drop('id',axis = 1)

y_train_id = y_train.pop('id')

 

from sklearn.model_selection import train_test_split

X_tr,X_val,y_tr,y_val = train_test_split(X_train,y_train,test_size = 0.2,random_state=2022)

 

from sklearn.ensemble import RandomForestClassifier

model = RandomForestClassifier()

model.fit(X_tr,y_tr)

pred = model.predict(X_val)

 

이렇게 코드를 적었는데 다음과 같은 오류가 떴습니다

<ipython-input-18-22d814881781>:3: DataConversionWarning: A column-vector y was passed when a 1d array was expected. Please change the shape of y to (n_samples,), for example using ravel().

 

어떤 부분을 수정해야 하는지 알 수 있을까요? ㅠㅠㅠ

 

0

퇴근후딴짓

X_tr,X_val,y_tr,y_val = train_test_split(X_train,y_train,test_size = 0.2,random_state=2022)

y_train['타겟 컬럼'] 타겟 컬럼을 지정해주세요:)

작업형2 모의문제1 (30강)

0

20

2

수강 기간 연장 문의 드립니다.

0

24

2

수강 계획과 관련해 문의 드립니다.

0

22

2

작업형1 - 연습문제 16~39 풀이는 몇강을 보면 되나요?

0

47

2

작업형 1 -연습문제 4-6

0

34

2

작업형 1 유형 부분

0

40

2

작업형 1 (삭제예정, 구 버전)

0

50

2

수강기간 연장 문의드립니다.

0

36

2

2유형 레이블 인코딩 VS 원핫 인코딩

0

36

3

수강기간 연장 문의드립니다.

0

42

2

인덱스 슬라이싱

0

36

2

질문 드립니다.

0

50

2

강의 내용 관련 질문드립니다~

0

46

2

수강 연장 문의

0

63

2

강의자료 일괄 다운로드

0

58

2

수강기간 연장 문의드립니다

0

48

2

list 문제 질문드립니다~

0

38

2

빅분기 실기 12회 재도전

0

63

2

강의 기간 연장 가능여부 검토 요청건

0

50

2

수강기간 연장 문의 드립니다

0

46

2

수강기간 연장 문의드립니다

0

52

2

질문이요

0

57

2

수강기간 연장 문의드립니다.

0

60

2

문제 3-2 질문드립니다

0

47

2