inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

3-4 로버스트 스케일링

해결된 질문

302

박윤정

작성한 질문수 4

0

선생님, 안녕하세요.

 

로버스트 스케일링이 적용되지 않는 칼럼이 있는 것 같아 문의글 남깁니다.

def get_nc_data():
    X_train = pd.read_csv("X_train.csv")
    X_test = pd.read_csv("X_test.csv")
    y_train = pd.read_csv("y_train.csv")

    n_train = X_train.select_dtypes(exclude='object').copy()
    n_test = X_test.select_dtypes(exclude='object').copy()
    c_train = X_train.select_dtypes(include='object').copy()
    c_test = X_test.select_dtypes(include='object').copy()
    return n_train, n_test, c_train, c_test
cols = ['age', 'fnlwgt', 'education.num', 'capital.gain', 'capital.loss', 'hours.per.week']
from sklearn.preprocessing import RobustScaler
n_train, n_test, c_train, c_test = get_nc_data() # 데이터 새로 불러오기

scaler = RobustScaler()
display(n_train.head())
n_train[cols] = scaler.fit_transform(n_train[cols])
n_test[cols] = scaler.transform(n_test[cols])
display(n_train.head())

이렇게 선생님께서 올려주신 강의노트에서

head(2) 부분만 head() 로 수정하여 실행시켜 보았는데요,

실행시킨 결과를 보면 capital.gain, capital.loss 두 칼럼에 대해서는 값이 그대로 나옵니다.

(민-맥스, 표준화 스케일링에서는 정상 처리된 것으로 확인되었습니다.)

제가 놓친 부분이 있는지 확인 가능하실까요?

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 2

1

퇴근후딴짓

X_train[['capital.gain', 'capital.loss']].describe()을 통해 값을 확인해보면
대부분의 값이 0이에요.
IQR(사분위 범위)이 0인 두 특성에 대해 RobustScaler를 적용해도 데이터의 대부분의 값이 변경되지 않습니다. 스케일링 공식에서 IQR로 나누는데, IQR이 0이므로 나눌 수 없기 때문에 IQR이 0인 모든 항목의 원래 값이 그대로 유지됩니다.

0

박윤정

엇 강의에서도 해당 칼럼 값이 바뀌지 않았네요..!

칼럼 특성상 로버스트 스케일링 후에도 동일한 값을 가지는 것인가요?

출력값 질문

0

11

1

수업노트가 어디에 있나요?

0

21

1

실기시험 제출관련

0

153

2

6.20 작업형 2 과적합

0

158

3

코딩팡 장업형2 베이스 라인 인코딩 종류 질문

0

49

2

로지스틱회귀, 회귀

0

48

2

회귀 문제를 풀때 질문입니다.

0

55

1

불균형 처리 후 성능이 더 낮아졌다면,

0

61

2

실기 체험 제2유형 에러 문의

0

61

1

LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요

0

50

2

3번문제 등분산 가정

0

48

2

작업형3 target 형 변환 질문

0

35

2

[작업형1] 연습문제 섹션1 ~ 10 의 section4

0

36

3

원핫인코딩과 레이블 인코딩에서 concat

0

59

2

제2유형 질문입니다.

0

46

2

C()

0

44

2

작업형 2에서 strafity 적용 유무

0

52

2

수강 기간 연장 가능 여부 문의드립니다.

0

61

1

ols

0

43

2

2유형 작성관련 질문(일반 심화)

0

39

2

2유형 작성관련 질문

0

41

2

2유형 object컬럼 개수 다르면

0

48

2

코딩팡질문이요ㅠㅠ

0

45

2

관찰값과 기대값의 개념이 헷갈립니다.

0

25

2