inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업2 스케일링 관련

해결된 질문

51

위잉

작성한 질문수 9

0

안녕하세요.

작업2에서 인코딩할때 혹시 모를 경우를 대비해

df=concat[train,test]로 합치고 나서 인코딩을 한후 쪼개는 방식으로 진행하고 있는데

스케일링의 경우에도

train에서 fit_transform , test에서 transform을 하지 않고

df로 합치고 나서 fit_transform만 해도 괜찮을까요?

train이랑 df랑 데이터 분포가 다르니까 스케일링 되는 정도도 다를것 같은데

합치고 해도 상관없을지 궁금합니다.

감사합니다

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

네, 빅분기 시험에서는 코드를 평가하지 않기 때문에 상관없습니다.

 

[심화학습]

시험과는 별개로 test데이터를 활용하는 방법은 Data Leakage 문제가 있어 실제 상황에서는 문제가 있습니다.

인코딩도 합쳐서 진행하기 보다 없는 컬럼은 별도로 처리하는 OrdinalEncoder 등을 사용해요! 시험문제에서는 더 복잡해지기만 해서 알려드리진 않았어요

작업형2 카테고리

0

4

1

110강 회귀_8번 문의

0

8

2

XGBRegressor 학습 시 warning 출력

0

11

2

데이터 프레임을 변경해도 되나요?

0

9

2

10회 기출 작업형3 문제 2-1 질문

0

14

2

작업형 2 질문

0

13

2

작업형 2 템플릿 확인 요청

0

12

2

작업형2 인코딩 질문

0

22

2

작업형 3 벼락치기 공부방법 질문

0

30

2

기출 11회 작업형 2_전체 데이터 학습 여부

0

31

2

예측값 결과 소수점 차이

0

26

2

기출 문제와 실전챌린지 연습문제 무엇부터 푸는게 나은가요?

0

34

1

전처리 train() test([ ])

0

23

2

작업형 1 배경지식 질문

0

31

2

옳게 풀은건지 질문드립니다!

0

21

1

roc_auc_score

0

29

2

추가질문 합니다

0

22

2

시험환경 구름

0

19

2

2유형 질문드려요

0

20

2

RandomForest vs lgb

0

27

2

전처리 관련질문

0

29

3

작업형3 기출

0

19

2

유형2에서 데이터분할 생략 가능여부

0

32

2

9회 기출 유형3 질문

0

21

2