concat 으로 합쳐서 인코딩하는건 실전에서 안하나요?
유니크 확인하고 합쳐서 인코딩하고 인덱싱하는 방식은 어떨 때 사용하는 건가요?
첫 번째 문제는 확인 과정도 없는 거 같아서 헷갈리네요
답변 2
0
기출에서는 다른경우가 없었어요!
그대로 풀어도 에러없이 처리되었습니다
EDA단계에서 특정 컬럼의 카테고리가 train과 test기 다를 때만 합쳐서 인코딩이 필요합니다 🙂
0
안녕하세요, 인프런 AI 인턴입니다. Ryujin Win님께서 데이터 인코딩 시 concat을 사용하여 데이터를 합치는 방식에 대해 질문을 주셨군요.
실전 데이터 분석에서 concat을 사용하여 트레인과 테스트 데이터를 합쳐 인코딩하는 방법은 특정 상황에서 매우 유용하게 사용됩니다. 주로 다음과 같은 경우에 이 방법을 사용합니다:
데이터 범주 통일: 트레인과 테스트 데이터셋의 범주형 변수에 포함된 고유값이 다를 경우, 합쳐서 인코딩하면 모든 범주에 대해 동일한 기준으로 인코딩이 가능합니다. 이는 특히 원핫인코딩 시에 유용하며, 각 데이터셋 간의 일관성을 확보할 수 있습니다.
새로운 범주 처리: 테스트 데이터셋에만 존재하는 범주가 있을 때, 이를 사전에 인지하지 못하면 인코딩 과정에서 문제가 발생할 수 있습니다.
concat을 사용해 데이터를 합쳐 인코딩하면 이 문제를 방지할 수 있습니다.에러 방지: 인코딩 시 발생할 수 있는 오류를 최소화하기 위해, 데이터셋의 범주형 변수를 사전에 확인하고 합쳐 처리하는 것이 실수를 줄일 수 있습니다.
다만 이러한 방법은 반드시 사용되는 것은 아닙니다. 어떤 분석에서는 별도로 인코딩할 수 있으며, 이 경우 범주형 변수가 각 데이터셋에 동일하게 있는지 확인해야 합니다.
추가로 도움이 될 만한 관련 질문과 답변을 소개합니다:
- 작업형2에 대한 질문입니다.
- 인코딩 에러 질문
이 링크들을 참고하여 각 상황에 맞는 인코딩 방식을 잘 선택하시기 바랍니다.
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
ID 전처리 이유
0
2
1
데이터제공
0
3
1
예시문제 작업형3 꼬리질문2번
0
2
0
데이터 개수를 구할 때, len과 value_counts 차이
0
5
1
작업형 2 제출방
0
5
1
인코딩 스케일링 순서
0
10
2
실제 시험에서도 공식을 문제에서 주는지
0
8
2
수강 연장 문의
0
9
2
작업형2 정리한 내용 확인 부탁드립니다 ㅜㅜ
0
15
1
14강 "" 사용 관련 질문
0
15
2
캐글 제출 점수
0
19
2
기출 마무리 방법
0
38
2
빅이시 작업형2 기초 - 케이스 1~3 관련 문의
0
25
2
데이터프레임 슬라이싱 인덱싱 질문2
0
25
2
단일표본검정, 샤피로검정, 윌콕슨검정
0
31
2
강의자료 다운로드 여부
0
32
2
문제에 첨부된 예시와 실제 출력된 샘플 비교
0
28
2
원핫 인코딩 관련
0
38
2
타겟 분리
0
37
2
Id 삭제
0
43
2
roc_auc_score 질문: 작업형2 모의문제3 09분 48초
0
38
2
원핫인코딩 코드 질문
0
35
2
map 함수 사용 필수적인가요
0
46
2
수강 기한 연장 문의드립니다.
0
50
2