inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

3-4 Feature engineering 데이터 전처리 질문입니다.

해결된 질문

207

kimx2725

작성한 질문수 4

0

X_test 데이터 전처리에서 'age'와 'hours.per.week'의 fillna가 X_test가 아닌 X_train의 평균과 중앙값으로 이루어졌는데요, 아래와 같이 X_test값으로 fillna하면 안 되는 걸까요?

X_test['age'] = X_test['age'].fillna(int(X_test['age'].mean()))

X_test['hours.per.week'] = X_test['hours.per.week'].fillna(X_test['hours.per.week'].median())

 

원본

# X_test데이터
X_test['workclass'] = X_test['workclass'].fillna(X_test['workclass'].mode()[0])
X_test['native.country']  = X_test['native.country'].fillna(X_test['native.country'].mode()[0])
X_test['occupation'] = X_test['occupation'].fillna("X")
X_test['age'] = X_test['age'].fillna(int(X_train['age'].mean()))
X_test['hours.per.week'] = X_test['hours.per.week'].fillna(X_train['hours.per.week'].median())

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

1

퇴근후딴짓

시험 문제에서 데이터 누수(data leakage)로 인해 제약을 걸지 않으면 가능합니다.

일반적으로는 test데이터는 미래 데이터로 평균이나 통계에 대한 정보를 사용하진 않습니다만 시험에서는 크게 제약을 둔 케이스가 아직은 없어요!!(결측치가 6회 이전까지 한 번도 출제되지 않음)

수강 연장가능여부 문의드립니다!

0

17

1

수강기간 연장 문의드립니다!

0

23

1

최빈값

0

21

2

수강 가이드라인

0

18

2

수강 연장 가능 여부 문의

0

40

2

강의 구매했는데 교재 필수일까요

0

27

2

수강기간 연장 가부 문의드립니다.

0

25

2

수강기간 연장이 가능한지 양해를 구하며 문의를 드립니다.

0

32

2

작업형2 모의문제2에서 drop이랑 인코딩

0

41

3

인코딩을 다 꼭 해봐야하는지

0

43

2

안녕하세요? 강사님 질문있습니다.(인코딩관련)

0

58

2

이진분류에서 양성 클래스가 0일 때 평가 방법

0

46

2

원핫인코딩 전 train과 test 병합여부

0

51

2

수강기간 연장

0

69

2

29강 작업2형의 이상치 처리

0

67

2

수강기간 연장 문의드립니다!

0

65

2

9월에 실기출제기준 개정내역에 신설된부분

0

56

1

작업형2 모의문제2 결과값 관련 문의드립니다.

0

67

2

12회차 시험 실패 후 13회 도전 예정입니다.

0

57

1

random_state 값

0

73

2

강의 연장 문의 드립니다.

0

68

2

강의 연장 문의

0

61

2

오징어게임

0

71

1

object 컬럼이 여러 개인 경우 인코딩 전처리 방법

1

53

2