2유형 shape
2유형 shape을 처음만 확인하고 (스케일러&원핫진행) 코드 수정하는 과정에서 shape 을 확인안했네요 (스케일링 진행x 라벨인코딩/겟더미 둘중 하나) x_test로 데이터 넣은건 확실히 기억나는데 결과수에 영향없겠죠ㅠㅠㅠ?
질문 보다보니까 train과 test 합쳐서 겟더미 하는것과 따로하는게 결과가 달라질수있다는 글 보고 급 무서워져서요ㅠㅠ 저는 시험에서 train과 test 따로했고 train중에서도 object형 변슈만 따로뽑아서 인코딩했습니다ㅠ!
답변 2
0
안녕하세요, 인프런 AI 인턴입니다. 토리님.
질문해주신 내용에 대해 설명드리겠습니다. 데이터 전처리 과정에서 Label Encoding과 One-Hot Encoding은 데이터에 따라 결과에 영향을 미칠 수 있습니다. 특히, 범주형 변수를 다룰 때, train과 test 데이터를 따로 인코딩 하는 경우에는 문제가 발생할 수 있습니다.
인코딩 시 주의사항
Label Encoding:
Label Encoding은 특정 순서를 갖게 되므로 회귀 문제 해결에는 적합하지 않으며, 분류 문제에서 사용하는 것이 일반적입니다.
- train 데이터에 fit한 다음, 동일한 인코더로 test 데이터에 transform 해야 일관성을 유지할 수 있습니다.
One-Hot Encoding (get_dummies):
- train과 test 데이터를 따로 인코딩하면 두 데이터셋의 카테고리 개수가 다를 경우 문제가 될 수 있습니다. 예를 들어, train 데이터에는 없는 카테고리가 test 데이터에 존재하면, 해당 카테고리가 무시되거나 추가로 생성되어 shape가 달라질 수 있습니다.
- 해결책: train과 test 데이터를 먼저 합쳐서 One-Hot Encoding을 수행한 뒤, 다시 나누는 것이 안전합니다.
- train과 test 데이터를 따로 인코딩하면 두 데이터셋의 카테고리 개수가 다를 경우 문제가 될 수 있습니다. 예를 들어, train 데이터에는 없는 카테고리가 test 데이터에 존재하면, 해당 카테고리가 무시되거나 추가로 생성되어 shape가 달라질 수 있습니다.
추천 방법
- 만약 시험에서 두 데이터셋을 따로 인코딩 하셨다면, 일부 카테고리가 누락되었을 가능성을 염두에 두셔야 합니다. 하지만 동일한 컬럼이 유지되고, 두 데이터셋이 동일한 카테고리 집합을 가진 경우라면 큰 문제가 발생하지 않을 수도 있습니다.
- 향후 작업에서는 가급적 두 데이터를 합쳐서 인코딩 하는 방법을 고려해 보시길 바랍니다.
추가적인 도움이 필요하시다면, 이 게시물에서 비슷한 상황에 대한 조언을 확인하실 수 있습니다: “작업형 2유형 label encoding”
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
8/6 작성한 연장문의 질문글에 대한 재요청
0
12
1
수강기간 연장 문의
0
10
1
수강기간 연장문의
0
8
1
수강기간 연장 요청 문의드립니다
0
11
1
수강 기간 연장 문의
0
33
1
수강연장 가능 문의 (기간 약 한달반)
0
52
2
수강기간 연장 가능할까요 선생님
0
69
2
Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.
0
47
3
수강연장요청 문의
0
80
2
아무래도 다음 시험 연장은 어렵겠죠?
0
100
2
빅분기 12회 결과 관련 문의
0
104
1
책이랑 강의랑 순서나 예제가 다른것 같네요
0
76
2
수강연장 문의
0
102
2
재검토 요청 방법 좀 알려주셔요...-.-;;
0
100
2
12회 실기 질문(작업형 2)
0
88
2
뒤로가기 버튼 같은 것이 있나요?
0
61
1
강의 연장 문의
0
93
2
출력값 질문
0
69
2
수업노트가 어디에 있나요?
0
59
1
실기시험 제출관련
0
222
3
6.20 작업형 2 과적합
0
227
3
코딩팡 장업형2 베이스 라인 인코딩 종류 질문
0
84
2
로지스틱회귀, 회귀
0
76
2
회귀 문제를 풀때 질문입니다.
0
79
1





