6회 기출 작업형2
EDA 과정 중에
# 기초통계 train(object)
train.describe(include='O')
# 기초통계 test(object)
test.describe(include='O')train과 test 데이터의 unique 값이 동일하다면 실제 카테고리 값 자체 비교 없이 바로 인코딩 해도 문제 없나요?
카테고리 값을 비교해서 안전하게 하고 싶지만, 굳이 안 그래도 되는 거면 안 하려고 합니다!!
답변 2
0
안녕하세요, 인프런 AI 인턴입니다. 김범준님께서 주신 질문에 대해 답변드리겠습니다.
두 데이터셋(train과 test)에서 범주형 데이터의 unique 값이 동일하다면, 일반적으로 카테고리 자체를 비교하지 않고 바로 인코딩을 진행해도 큰 문제가 없습니다. 그러나, 각각의 데이터셋에 포함된 카테고리가 실제로 모든 범주를 포함하고 있는지 명확히 알지 못할 때는 확인하는 것이 안전할 수 있습니다.
범주형 데이터의 인코딩 방법으로는 원-핫 인코딩과 라벨 인코딩이 있으며, 만약 데이터셋이 이미 서로 같은 범주를 가지고 있음을 확인한 상황이라면, 바로 인코딩을 진행하는 것이 가능합니다. 이 경우 카테고리 값이 모델의 학습 및 예측에 일관성을 제공할 것입니다.
하지만, 언제나 데이터 품질을 최대화하기 위해 범주형 값 간의 차이를 검토하는 것이 최선의 방법일 수 있습니다. 예를 들어, 추가적인 카테고리가 예기치 않게 도입될 수 있는 데이터셋에서 인코딩을 진행한다면 문제가 발생할 수 있습니다.
해당 방법에 대해 추가적인 정보를 얻고 싶으시다면 아래 유사한 주제의 질문을 참고하세요:
- EDA 카테고리 비교 질문에서는 카테고리 비교가 언제 필요한지에 대해 다룹니다.
- 작업형2 질문에서는 데이터 통합 및 인코딩 전략에 대한 정보를 제공합니다.
특히 작업형 2에서는 범주형 데이터의 일관성을 유지하기 위한 다양한 실전 전략이 논의되고 있으니 참고하시기 바랍니다.
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
뒤로가기 버튼 같은 것이 있나요?
0
28
1
강의 연장 문의
0
32
1
출력값 질문
0
31
2
수업노트가 어디에 있나요?
0
29
1
실기시험 제출관련
0
160
2
6.20 작업형 2 과적합
0
169
3
코딩팡 장업형2 베이스 라인 인코딩 종류 질문
0
52
2
로지스틱회귀, 회귀
0
52
2
회귀 문제를 풀때 질문입니다.
0
59
1
불균형 처리 후 성능이 더 낮아졌다면,
0
66
2
실기 체험 제2유형 에러 문의
0
66
1
LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요
0
52
2
3번문제 등분산 가정
0
50
2
작업형3 target 형 변환 질문
0
38
2
[작업형1] 연습문제 섹션1 ~ 10 의 section4
0
40
3
원핫인코딩과 레이블 인코딩에서 concat
0
62
2
제2유형 질문입니다.
0
49
2
C()
0
44
2
작업형 2에서 strafity 적용 유무
0
53
2
수강 기간 연장 가능 여부 문의드립니다.
0
63
1
ols
0
44
2
2유형 작성관련 질문(일반 심화)
0
41
2
2유형 작성관련 질문
0
42
2
2유형 object컬럼 개수 다르면
0
49
2