피처 엔지니어링 전체 과정
피처 엔지니어링의 전체 과정에 대해서 잘 이해가 안되서 질문 드립니다.
데이터 전처리를 통해 결측값과 이상값을 처리하고, 수치형 변수와 범주형 변수로 나눈 뒤 수치형 변수는 스케일링을 적용하고 범주형 변수는 인코딩을 적용하고 그 이후에 나눈 수치형 변수와 범주형 변수를 합친다.
만약 수치형 변수와 범주형 변수를 합친 후 train 데이터와 test 데이터의 shape를 출력했을 때, 각각의 컬럼 수가 다르다면 인코딩을 잘못한 것이다.
train데이터와 test 데이터의 shape를 출력했을 때 컬럼 수가 다르다는 걸 알게 되면 그때부턴 어떻게 해야 되나요?
데이터를 다시 새로 load하고
범주형 변수와 수치형 변수의 컬럼 정보를 리스트에 저장한 후 train data와 test data를 합쳐서
합친 전체 data의 수치형 변수 컬럼과 범주형 변수 컬럼에 대해 각각 스케일링과 인코딩을 진행한 후
train data와 test data로 나눠줘야하는 건가요?
제가 이해한 것이 맞는 건지 궁금합니다!!
강의 잘 듣고 있습니다. 감사합니다!^^
답변 1
0
안녕하세요! 글이 아니라 코드로 보여주시면 정확할 것 같습니다.
서술형 문제가 아니라 글로 표현했을 때 간혹 오해가 있을 수 있더라고요!
설명은 틀린부분은 없을 것 같습니다.
컬럼 수가 다르다는 걸 알게 되면 그때부턴 어떻게 해야 되나요? 합쳐서 인코딩 진행했으면 다를 이유가 없을 것 같아요 화이팅입니다.!
로지스틱회귀, 회귀
0
28
2
회귀 문제를 풀때 질문입니다.
0
32
1
불균형 처리 후 성능이 더 낮아졌다면,
0
44
2
실기 체험 제2유형 에러 문의
0
35
1
LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요
0
35
2
3번문제 등분산 가정
0
35
2
작업형3 target 형 변환 질문
0
29
2
[작업형1] 연습문제 섹션1 ~ 10 의 section4
0
23
3
원핫인코딩과 레이블 인코딩에서 concat
0
44
2
제2유형 질문입니다.
0
39
2
C()
0
36
2
작업형 2에서 strafity 적용 유무
0
43
2
수강 기간 연장 가능 여부 문의드립니다.
0
46
1
ols
0
36
2
2유형 작성관련 질문(일반 심화)
0
30
2
2유형 작성관련 질문
0
29
2
2유형 object컬럼 개수 다르면
0
37
2
코딩팡질문이요ㅠㅠ
0
36
2
관찰값과 기대값의 개념이 헷갈립니다.
0
19
2
작업형2 ID 컬럼 삭제 질문
0
39
2
2유형 작성관련 질문
0
27
2
memoryerror 질문
0
21
2
작업형 유형2 이렇게 고정 템플릿으로 가져가도 될까요?
0
37
1
ID 삭제 필수 인가요?
0
33
3