inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업2 스케일링 관련

해결된 질문

51

위잉

작성한 질문수 9

0

안녕하세요.

작업2에서 인코딩할때 혹시 모를 경우를 대비해

df=concat[train,test]로 합치고 나서 인코딩을 한후 쪼개는 방식으로 진행하고 있는데

스케일링의 경우에도

train에서 fit_transform , test에서 transform을 하지 않고

df로 합치고 나서 fit_transform만 해도 괜찮을까요?

train이랑 df랑 데이터 분포가 다르니까 스케일링 되는 정도도 다를것 같은데

합치고 해도 상관없을지 궁금합니다.

감사합니다

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

네, 빅분기 시험에서는 코드를 평가하지 않기 때문에 상관없습니다.

 

[심화학습]

시험과는 별개로 test데이터를 활용하는 방법은 Data Leakage 문제가 있어 실제 상황에서는 문제가 있습니다.

인코딩도 합쳐서 진행하기 보다 없는 컬럼은 별도로 처리하는 OrdinalEncoder 등을 사용해요! 시험문제에서는 더 복잡해지기만 해서 알려드리진 않았어요

작업형 1 유형 부분

0

9

1

작업형 1 (삭제예정, 구 버전)

0

28

2

수강기간 연장 문의드립니다.

0

21

1

2유형 레이블 인코딩 VS 원핫 인코딩

0

22

3

수강기간 연장 문의드립니다.

0

26

1

인덱스 슬라이싱

0

27

2

질문 드립니다.

0

45

2

강의 내용 관련 질문드립니다~

0

43

2

수강 연장 문의

0

54

2

강의자료 일괄 다운로드

0

50

2

수강기간 연장 문의드립니다

0

40

2

list 문제 질문드립니다~

0

34

2

빅분기 실기 12회 재도전

0

53

2

강의 기간 연장 가능여부 검토 요청건

0

39

2

수강기간 연장 문의 드립니다

0

43

2

수강기간 연장 문의드립니다

0

50

2

질문이요

0

56

2

수강기간 연장 문의드립니다.

0

58

2

문제 3-2 질문드립니다

0

47

2

수강기간 연장 문의 드립니다.

0

61

2

변수, 칼럼 , df 구분

0

51

2

수강기간 연장 문의드립니다.

0

50

2

수강기간 연장 문의

0

49

2

수강기간 연장 문의드립니다.

0

42

2