encoding시 데이터 병합
50
작성자 없음
작성한 질문수 0
범주형 변수encoding시에 무조건 train,test데이터셋 병합 - encoding - 분리 단계로 진행해도 상관없나요?
답변 2
0
안녕하세요, 인프런 AI 인턴입니다. f2220630님 질문에 답변 드리겠습니다.
범주형 변수 인코딩 시 데이터셋을 병합하는 방법에 대해 궁금하신 것 같습니다. 일반적으로 train과 test 데이터셋을 병합하여 인코딩한 후 다시 분리하는 방법은 카테고리에 일관성을 주기 위한 절차입니다. 이는 특히 train과 test 데이터셋에서 카테고리(범주)가 다를 경우 문제가 발생할 수 있기 때문에 사용됩니다.
1. 병합 후 인코딩을 추천하는 경우:
- 카테고리가 다른 경우: 두 데이터셋에 있는 범주형 값의 종류가 다를 가능성이 있을 때 병합 후 인코딩하면 카테고리 인코딩 오류를 피할 수 있습니다.
- 모든 칼럼에 고유한 범주형 변수를 포함하고 싶을 때: 모든 가능한 범주형 값을 고려하여 인코딩하여 일관성을 유지하기 위함입니다.
2. 개별 인코딩이 가능한 경우:
- 카테고리가 양쪽 다 동일한 경우: train과 test 데이터셋의 카테고리가 완전히 동일하면 병합하지 않고 인코딩을 진행해도 무방합니다. 그러나 데이터셋의 크기나 카테고리 중복 문제가 존재하지 않는지 확인 후 진행하는 것이 바람직합니다.
따라서 이 절차는 선택사항이지 필수사항은 아니지만, 데이터셋 간의 일관성을 유지하고 잠재적인 문제를 방지하기 위한 안전장치로 볼 수 있습니다.
이와 관련된 유사한 질문은 다음 링크에서 확인하실 수 있습니다:
- 데이터 합치고 분리하는 경우 질문입니다!
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
작업형 2 기출7회분에서
0
14
1
작업형2 모의문제1 (30강)
0
22
2
수강 기간 연장 문의 드립니다.
0
27
2
수강 계획과 관련해 문의 드립니다.
0
24
2
작업형1 - 연습문제 16~39 풀이는 몇강을 보면 되나요?
0
47
2
작업형 1 -연습문제 4-6
0
34
2
작업형 1 유형 부분
0
42
2
작업형 1 (삭제예정, 구 버전)
0
51
2
수강기간 연장 문의드립니다.
0
37
2
2유형 레이블 인코딩 VS 원핫 인코딩
0
37
3
수강기간 연장 문의드립니다.
0
42
2
인덱스 슬라이싱
0
36
2
질문 드립니다.
0
50
2
강의 내용 관련 질문드립니다~
0
46
2
수강 연장 문의
0
63
2
강의자료 일괄 다운로드
0
58
2
수강기간 연장 문의드립니다
0
48
2
list 문제 질문드립니다~
0
38
2
빅분기 실기 12회 재도전
0
63
2
강의 기간 연장 가능여부 검토 요청건
0
50
2
수강기간 연장 문의 드립니다
0
46
2
수강기간 연장 문의드립니다
0
52
2
질문이요
0
57
2
수강기간 연장 문의드립니다.
0
60
2