inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

data leakage관련해서 질문드립니다!

해결된 질문

312

김석종

작성한 질문수 13

0

안녕하세요 선생님 다름이 아니라 test의 결측치를 대체할 때 data leakage 문제로 인해 train의 평균값이나 중위수로 대체해주시는걸 보고 궁금한게 있어 질문드립니다. 최빈값 같은 경우는 train의 최빈값으로 안하고 test의 최빈값으로 대체해주셨는데 데이터 누수를 방지하려면 최빈값도 똑같이 train의 최빈값으로 해주는 것인지 아니면 범주형 변수는 상관 없고 수치형 변수만 train값으로 해주는 것인지 궁금합니다.

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

일관성 있게 제공하지 못한 점 죄송합니다. 콘텐츠를 점검 해하도록 할게요!!

일반적으로는 train데이터의 값을 사용해서 전처리 진행하는 것이 일반적입니다.

다반 빅데이터 분석기사에서는 어느쪽이던 큰 문제가 없을 것이라 생각합니다. 🙌

1

김석종

아닙니다 선생님! 항상 친절하게 답변해주셔서 감사합니다.

1

퇴근후딴짓

네 그리고 하나 덧붙이자면

train과 test를 합쳐서 인코딩하는 것은 data leakage 문제를 알면서 알려드렸습니다.

다른 방법이 있긴하나 쉬운 코딩을 위해서 입니다.

화이팅입니다.

수강 연장 문의드립니다.

0

29

2

강의 연장 문의

0

33

2

수강 신청 연장 문의드립니다.

0

49

2

작업형 1번문제... 환경관련

0

32

2

12회 기출은 언제 업데이트 될까요??

0

40

2

8/6 작성한 연장문의 질문글에 대한 재요청

0

39

2

수강기간 연장 문의

0

41

2

수강기간 연장문의

0

37

2

수강기간 연장 요청 문의드립니다

0

38

2

수강 기간 연장 문의

0

47

2

수강연장 가능 문의 (기간 약 한달반)

0

60

2

수강기간 연장 가능할까요 선생님

0

74

2

Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.

0

56

3

수강연장요청 문의

0

92

2

아무래도 다음 시험 연장은 어렵겠죠?

0

110

2

빅분기 12회 결과 관련 문의

0

113

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

83

2

수강연장 문의

0

107

2

재검토 요청 방법 좀 알려주셔요...-.-;;

0

107

2

12회 실기 질문(작업형 2)

0

94

2

뒤로가기 버튼 같은 것이 있나요?

0

67

1

강의 연장 문의

0

100

2

출력값 질문

0

74

2

수업노트가 어디에 있나요?

0

64

1