encoding시 데이터 병합
60
작성자 없음
범주형 변수encoding시에 무조건 train,test데이터셋 병합 - encoding - 분리 단계로 진행해도 상관없나요?
답변 2
0
안녕하세요, 인프런 AI 인턴입니다. f2220630님 질문에 답변 드리겠습니다.
범주형 변수 인코딩 시 데이터셋을 병합하는 방법에 대해 궁금하신 것 같습니다. 일반적으로 train과 test 데이터셋을 병합하여 인코딩한 후 다시 분리하는 방법은 카테고리에 일관성을 주기 위한 절차입니다. 이는 특히 train과 test 데이터셋에서 카테고리(범주)가 다를 경우 문제가 발생할 수 있기 때문에 사용됩니다.
1. 병합 후 인코딩을 추천하는 경우:
- 카테고리가 다른 경우: 두 데이터셋에 있는 범주형 값의 종류가 다를 가능성이 있을 때 병합 후 인코딩하면 카테고리 인코딩 오류를 피할 수 있습니다.
- 모든 칼럼에 고유한 범주형 변수를 포함하고 싶을 때: 모든 가능한 범주형 값을 고려하여 인코딩하여 일관성을 유지하기 위함입니다.
2. 개별 인코딩이 가능한 경우:
- 카테고리가 양쪽 다 동일한 경우: train과 test 데이터셋의 카테고리가 완전히 동일하면 병합하지 않고 인코딩을 진행해도 무방합니다. 그러나 데이터셋의 크기나 카테고리 중복 문제가 존재하지 않는지 확인 후 진행하는 것이 바람직합니다.
따라서 이 절차는 선택사항이지 필수사항은 아니지만, 데이터셋 간의 일관성을 유지하고 잠재적인 문제를 방지하기 위한 안전장치로 볼 수 있습니다.
이와 관련된 유사한 질문은 다음 링크에서 확인하실 수 있습니다:
- 데이터 합치고 분리하는 경우 질문입니다!
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
작업형 1번문제... 환경관련
0
23
2
12회 기출은 언제 업데이트 될까요??
0
29
2
8/6 작성한 연장문의 질문글에 대한 재요청
0
35
2
수강기간 연장 문의
0
28
2
수강기간 연장문의
0
34
2
수강기간 연장 요청 문의드립니다
0
32
2
수강 기간 연장 문의
0
43
2
수강연장 가능 문의 (기간 약 한달반)
0
55
2
수강기간 연장 가능할까요 선생님
0
70
2
Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.
0
49
3
수강연장요청 문의
0
84
2
아무래도 다음 시험 연장은 어렵겠죠?
0
104
2
빅분기 12회 결과 관련 문의
0
110
1
책이랑 강의랑 순서나 예제가 다른것 같네요
0
79
2
수강연장 문의
0
102
2
재검토 요청 방법 좀 알려주셔요...-.-;;
0
102
2
12회 실기 질문(작업형 2)
0
89
2
뒤로가기 버튼 같은 것이 있나요?
0
63
1
강의 연장 문의
0
97
2
출력값 질문
0
69
2
수업노트가 어디에 있나요?
0
60
1
실기시험 제출관련
0
223
3
6.20 작업형 2 과적합
0
227
3
코딩팡 장업형2 베이스 라인 인코딩 종류 질문
0
86
2